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第 一 章 预备 知识 


阅读 本 书 所 需 的 预备 知识 有 以 下 三 方面 : 一 是 相当 于 大 学 二 
年 级 程度 的 数学 分 析 与 线性 代数 ， 二 是 数理 统计 . 除了 初等 教 本 
中 包含 的 一 般 性 内 容 外 ,还 需要 一 点 线性 模型 的 估计 理论 知识 、 判 
决 函数 的 基本 概念 ,Bayes 方法 初步 和 估计 的 容许 性 理论 中 若干 较 
不 常见 的 结果 .三 是 概率 论 ， 需 要 测度 论 、 强 弱 极 限 理论 及 鞭 论 
的 初步 知识 ,程度 大 体 上 相当 于 Loave 的 专著 [1]1, 个 别 地 方 还 需 
用 到 Petrov 专著 [2] 和 Stout 的 专著 [3] 中 的 材料 . 

在 本 章 中 ,我 们 打算 对 本 书 中 常用 的 一 部 分 知识 (如 线性 模型 
的 最 小 二 乘 估计 理论 和 矩阵 的 广义 逆 等 ) 以 及 某 些 在 文献 中 不 易 
查阅 的 事实 给 以 较 仔 细 的 叙述 。 对 其 他 内 容 。 主 要 是 概率 论 中 极 
限 理论 方面 , 因 涉 及 面 太 广 , 自 无 法 在 此 详细 叙述 . 但 准备 将 一 些 
常用 结果 不 加 证 明 地 汇集 一 下 ， 以 便于 查阅 .了 解 这 些 结果 的 确 
切 意 义 而 不 必 涉 及 其 证 明细 节 ， 就 可 以 读 懂 本 书 的 有 关 部 分 ， 当 
然 , 如 果 要 进一步 作 这 方面 的 研究 工作 , 则 必须 去 钻研 上 面 提 到 的 
有 关 著 作 , 或 与 之 相当 的 著作 . 


$11 矩阵 与 线性 模型 


先 提出 本 书 中 常用 的 一 些 记号 、 тте ЈАРЕ 常 称 为 
m X ?矩阵 4, 或 Aim X n. om = n 时 称 为 > 阶 方 阵 ， 方 阵 
ARTIRA A. SEDE 的 转 置 记 为 A. 一 列 息 阵 称 为 列 向 
量 ， 而 一 行 矩 阵 称 为 行 向 量 。 我 们 总 是 以 不 加 “:,” 的 商量 表 列 向 
E. 例如 ,a 为 -- 列 向 量 ， 而 e 则 为 行 向 量 . 向量 em Cant 


s, 的 长 为 { D oj ”， 记 为 jlo|。 抵 阵 4 的 秩 记 为 KCA). 着 4 


为 方 阵 , 则 其 迹 (trase), 即 主 对 角 线 元 之 和 ，* 记 为 A). Жанд 
及 的 矩阵 部 是 实 的 ， 

ow 为 一 at. Vk A= 
Cai- 1а), ЕН «ПАНЕ a, c а, 张 成 《或 生成 ) 的 线性 
子 空间 记 为 o4). зена а AA). ; 

正定 方 阵 4 记 为 4 > 0。 半 正定 (又 称 非 负 定 ) ЭЁ 4 25 
4 之 0, EPR, 正定 与 半 正 定 方 阵 必 为 对 称 , X 4— BI 
《4 一 BB 之 0), 则 记 为 422 B(A > В). n BERBEA Iss 或 
、 简 记 为 了。 

设 dim X n 4 (7) TA ан 网 记 为 4 = Casin, mms = 
ы». ME An == (al eas аз 2791,25 75, Ж 


imap = 0, iam lye- 4. f = l, ``", > 
RIFE lim 4„ = О 或 4,— О. zi) 为 一 列 正 数 , 且 当 n oo 


Rf. af — ОСЬ.) Со.) Xf i= 1, н, j= d, va ШИЙ 
A, = О(Ь,) (o0(5,)). 

《一 ) PE aAA. AEE ВЕЖА 

ABA = Á; (1.1) 

则 称 吾 为 4 的 一 个 “ 减 号 广义 逆 ”, 记 为 下 一 4， 在 本 书 中 ;我们 
只 用 这 种 方式 定义 的 广义 逆 , 因 此 在 以 后 ,“ 减 号 ”两 字 常 省 去 ， 

Жл 为 一 满 秩 《 非 异 》 方 阵 ， 则 47 ЕНТ АЕР 
4-!、 以 下 将 看 到 ,这 事实 之 遂 亦 真 。 由 这 个 性 质 可 知 ,、47 E A" 
的 某 种 推广 ， 这 在 以 下 的 福 质 1 中 四 得 更 为 明显 . | 

ОР ЭШЕЙ: 《区 下 只 涉及 在 后 面 有 中 的 ) 

1. B 47 的 充 要 条 件 为 , 若 4x 一 <c HIR N] х 一 Be 为 
其 一 解 。 

П. 设 в= 47, LOL id A= aiia). A 
ABa; = aj Pe 1,-- 50. 20 Ах = с 有 解 , 任 取 其 一 解 Ó *= 


^ 
12 х). 有 m PHOT 因而 


т m i 
АВс = A Dx? Ва = > хт АВа = 9 xfa = с» 
1 1 1 


HU Bc 为 一 解 。， 反 过 来 、 若 所 设 条 件 成 立 ， 则 天 dr a HR 
(‹((0,---,0,1,0,.-, 0)' 即 为 一 解 );: 有 ABa; = a; i= l, -tta n, 
因而 (1.1) 成 立 , 故 B= 47, 

2. 对 任何 4. 4 必 存 在 ， 更 进一步 若 通 过 初等 变换 将 4 


Es 
d” ° 
A= Q 
о о 


的 形状 * 则 B = 4” 的 充 要 条 件 为 ，B 有 形式 
* | 
B= 0 p, 
AE Е 


ЖО 
ЮЖ D. E.F 任意 (当然 ;车 4 为 m Xx s 


m). 
Ш. 设 4 为 mw X w。 任 取 一 个 X m 的 矩阵 B, 表 之 为 B= 


t Ta 则 

asama ds X: aen 2) 
S a d К | 
«(2-2 


< 一 1,» 
明 所 欲 证 . 由 这 个 结果 推出 以下 几 点 : 
з. A 必 存 在 。 


р | 
вяжа х 
Е 


b. Tk(A7) Ze (4). SE t: 若 Amx n, MHE 1» 
rk( A) < г< min(m,n), ETE А ,至 Tk( A47) == z, 
с. 当 且 仅 当 4 为 满 秩 方 阵 时 ,47 才 唯 一 ， 
3. 对 任何 矩阵 4, 有 ` 
AA (AAYA = А, | (1.2) 
А (АЛЛАА = А. ` (1.3) 
证 . 因为 任 一 实 和 矩阵 B = 0 的 充 要 条 件 是 ВВ = О, іс 
В = лл'(лл'у-А— A. Ж E = (САУ = AC, ico 
ал' (ллу 一 了 5 故 由 (1.1)( 改 其 中 的 4 为 44 3 号 为 (4 
BB' = [AA LAA YAA — AAC = 0, 
Am B = О. 这 证 明了 (1.27 (1.3) ЕВА. 
4. AKARD HARA 
A = Pdiag(3, ^: A,)P', 
ЖР WIERE, 2, 2.3, 为 4 的 全 部 特征 根 . 又 diag(3a …， 
1) 记 一 对 角 阵 ,其 主 对 阴线 元 依次 为 aotreo An ЩА ZZ— DP X 
рф; 
А7 = Pdisg(Ai!, -*- AZ3)P', 
此 处 约定 07+ 一 0， 由 此 可 知 , 若 4 对 称 ( 半 正定 )， 则 必 存 在 对 
称 ( 半 正 定 ) 的 A". 
(=) 投影 矩阵 与 笑 等 矩阵 设 .ez 为 = ЕЧ, СА 中 之 
一 线性 子 空间 .如 所 周知 , 任 一 向 量 * 可 分 解 为 x 一 ss 十 bx* 其 中 
az € et ;而 bx € t 且 这 种 分 解 是 唯一 的 . 变换 + 一 ax 显然 
是 一 线性 变换 ， 称 为 “向 .oz 的 投影 变换 ”, 将 此 变换 用 矩阵 用 为 
ox 一 Br， 则 互 称 为 "向 .ez 的 投影 (变换 ) 阵 ”， 一 般 地 , 若 8 为 向 
某 一 线性 子 空间 的 投影 阵 , 则 称 4 为 投影 阵 ， 
有 如 下 的 重要 结果 . | 
定理 11 设 4 为 任 一 矩阵 , 则 向 oet CA) 的 投影 阵 为 P, 一 
ACA'AY A! 《由 投影 阵 的 唯一 性 、 这 结果 也 表示 ALAA A. 与 
《4'4) 的 到 法 无 关 ). 
iE. 只 需 验 证 以 下 三 条 : а. Pax € СА) 31 КЕШ x, b. Pax 


» 4 + 


= r, 4 rE MCA) c x — Pax AALA), HHEN х. 

a 是 显然 的 ， 对 b, 注 意 若 rE (л), ШЕЕ с {Er = 

Ас. 于 是 由 (1.2) 式 
Рах = Р„Ас = А(А' А) А'Ас = Ас = x. 
为 证 c, 任 取 y — Aa € HV(4), 则 由 (1.3) 式 
y'(x — Рах) = d'A'(1 — ALA A) Ax 
= d'UA — АСВА) 4118 = О, 

SHBISKUE. 

”这 个 结果 给 投影 阵 以 一 明确 的 表达 式 ， 是 广义 逆 的 一 重要 应 
用 ， 易 见 ， 向 AA) 的 投影 阵 为 1 一 P... Х.Р, 之 秩 等 于 4 
20. PXE, 由 P, = ALAJA 知 rk(P,.) < (4). 又 在 
(1.2) 中 政 4 为 A, 得 ФР. A, f kP) > (47) = 
rk( 4). | i 

若 一 方 了 泗 4 满足 A^ = 4, ША ARSE. MARIRE 
对 称 的 蚕 等 阵 ， 易 见 这 种 方 阵 的 特征 根 只 能 为 1 或 0, 故 得 

1. 4 为 对 称 宪 等 阵 的 充 要 条 件 为 : 存在 正 交 阵 Р, 

4 一 | y r 一 kA). (1.4) 
о 0 
设 P — (ри) ааз 则 由 (1.4) 得 | 
х'Ах = 2: (5 2 > am 《xi э, Xa). (1.5) 
又 利用 关系 式 w(4B) = rr(B.4)。 由 (1.4) 立 得 

2. 对 称 医 等 阵 的 迹 等 于 其 秩 (此 性 质 对 一 般 琶 等 阵 也 成 立 )， 

寡 等 阵 之 一 重要 性 质 为 其 与 投影 阵 的 联系 : 

3. 4 为 投影 阵 的 充 要 条 件 为 : 4 КЕЧЕ. 

证 ， 设 4 为 向 线性 子 空间 .az 的 投影 阵 。 在 .er thi mi E 
bist bs 使 .et е СВ), В = (ЬЬ). WI 4 = P, = 
B(B'B) В. [N В'В 村 称 ， 故 由 广义 逆 的 性 质 4， 知 存在 对 称 的 
(B'B)"-。 取 此 作为 Ps 中 的 (8'B)-( 前 已 指出 ， 由 Ps 的 唯一 性 ， 


e 5 + 


与 《B'B) 的 取 法 无 关 ), 知 А = Ps 为 对 称 阵 . 又 由 (1.2)( 改 
ах вуж ; 

А? = В(В'В)-В'В(В'В)-В = B(B'BY B == 4, 
лахн. БЖ, 2429963, WEG. 4 BUG 
ec CA) ERE VE. 因 Az Cg (4), х. 

x € MLA) => x = Ас => Ах = Ade = Ас = x; 
€ M (A) > y = Ac => Y'(x — Ах) = ¿'A' G — AD 
-€4 — А)х 
: = ¿'( A — Ax = 0. 
明 记 欲 证 . | . 
(三) 线性 模型 与 最 小 二 张 估计 W 8 = (4. 86 为 未 
ЖАР 8, x; Gui» ttt Xp» i=l, co. n 2JEL 3 ÉS P 
维 向 量 。 es ctt es 为 随机 变量 , 则 称 
Y= xd. і = 1,055 01.6) 
为 一 线性 《回归 〉 模 型 ， 实际 上 ， 这 表示 一 个 包含 2 个 自 变量 
X, 及。 和 一 个 因 变 量 Y 的 结构 。 在 第 i 次 试验 或 观察 时 , 自 
变量 Xoro X, 分 别 取 值 rrot to vps 而 因 变 量 则 取 值 了 ;， 在 
一 些 间 题 中 ， Xu» tts Xpj 的 值 可 事先 指定 . 这 时 称 Xis 775 Xn 
为 “试验 点 列 ” 而 X = (zi … ixn) ВЕ". ВИЕ z; Z 
值 不 能 由 试验 者 自由 选择 的 场合 ,我 们 为 方便 计 也 沿用 以 上 术语 . 
ficco], 称 为 回归 系数 .xi8 可 视 为 由 变量 Y 的 从中， 依赖 于 
自 变量 的 部 分 ， 而 e 站 被 视 为 第 i 次 试验 的 随机 性 误差 。 因 此 ， 
常 假定 | 
Ee = 0, i=l, an, 0.7) 
引进 Y 一 (Yis eTa Y.) gm 《el "*5 £s) » 可 将 线性 模型 (1.6) 
写 为 矩阵 形式 : 
Y = XB + е, . (1.8) 
在 大 样本 理论 中 ;(1.6) 中 的 = 是 不 国定 的 :这 时 写成 Y; = xi8 + 
ej i= 1, 1: n 相应 于 (1.8) 的 形式 则 上 式 28. Yos 一 
Xip - eu» 2791525 ** "ç 


5 6 a 


线性 模型 理论 中 首要 问题 之 一 ,就 是 利用 хз Yis i 15-5 
n AX 8 及 其 线性 通 数 作出 估计 ， 及 检验 关于 它 的 假设 .在 此 我 
们 只 讨论 估计 间 题 。 称 让 为 8 的 最 小 二 冬 (Least Squares, 简 记 为 
LS) 佑 计 , 若 满足 条 件 


| Y — ХАР = min(]Y — Xl :pe Е}. (1.9) 
用 微分 法 ,得 出 必要 条 件 为 : 上 是 方程 
SB = ХҮ (S = X'X) (1.10) 


之 解 .方程 (1.10) 称 为 正则 方程 . 
定理 1.2 1° 方程 (1.10) 必 有 解 . 2° 《1.10) 之 性 一 解 必 满 足 
` (1.9). 3° 反之 , 若 8* 满足 (1.9), 则 8p8* 为 (1. 10) 之 一 Ж. 
WE. 1° 显然 .因由 (1.2) 易 知 : | : 
Á = S-X’'Y | (1.11) 
REC. 10) 之 一 解 。 若 六 为 (1.10) 之 任 一 解 ， 则 对 任何 8€ R 有 
ПУ — ха = ЛУ — xl! + [х(4— DIL 
| + 208 — ВУХ'СУ — XÊ) 
= У — ХАР + ||x(ó'— 8M 2 У — xó. 
(1.12) 
这 证 明了 2"。 若 全 WE CIO. WA 8 一 8? 代 人 (1.12), 应 有 
к BP = 0， 因 而 XP = Х8*, ik 
Sg* = X'X8* 一 X' XÂ — SÉ = X'Y , 
BH g* 确 为 方程 (1.10) 之 一 解 。 证 毕 . 
Ti rk(X) = р, Д1 15| = 0, 这 时 称 为 “ 消 秩 情况 ”. 在 满 秩 情 
WOFS.COA00898£ RI 8 AI LS 估计 ,是 唯一 的 : 
B-sUX'Y. — (1.13) 
在 这 种 情况 下 称 8 为 可 估 的 、 一 般 ， 只 有 在 上 可 估 时 ， 才 谈 到 其 
LS 估计 .但 我 们 以 后 不 坚持 这 一 点 ,而 称 可 表 为 《1.11) 的 为 8 
的 LS fit. 
容易 证 明 , 若 可 估 而 条 件 (1,7) 满 足 ; 则 8 的 LS tiit 29 Ж 
偏 的 。 KÆ em (arcte! 的 协 差 阵 为 ;由 站 的 协 差 涟 为 
COV(A) 一 SIX'EXS-L。 (1.14) 


. 7 >» 


事实 上 ， 有 ff 一 SIX'Y = S3X'(X8 + с) = @ + 571Х'е. dh 
Ее = 0 VADER. 再 注意 到 3 ЖУК. ETIS 
СОУ(#) = S"'X'Z(SOX'Y = $?X'XX$87^4, 

- -全 重要 的 特例 是 | 
Egi LLO, (1.15) ` 
这 时 由 (1.14) 得 

COV(A) = es^, . (1.16) 
如 果 线 性 模型 (1.8) 满足 条 件 (1.7) M (1.15), WREX Gauss- 
Markov 模型 ,简称 为 GM EACE HARRER X M). 条件 (1.7》 
各 (1.15) 也 称 为 GM RER GM BE. 在 讨论 线性 模型 时 一般 
常 急 定 (1.7), 故 GM 条件 一 般 特 指 (1.15)， 在 (1.15) 中 ,wm 为 随机 
误差 的 (公共 ) 方 差 . 它 一 般 假 定 为 未 知 ， 是 线性 模型 的 一 重要 参 
在 证 明定 理 1.3 时 曾 得 到 表达 式 | 
Ê — В = S 1X'e, (1.17) 
它 把 0—0 RA nce 的 线性 组 合 ,是 一 很 有 用 的 关系 式 ， 

(m) е] ра 5 Gauss-Markov (GM) ÆA, BLUE 
设 有 线性 模型 (1.8), 并 设 条 件 (1.7) 成 立 . VE c'8 为 之 一 线性 函 
Ж. 若 存 在 c8 之 一 无 偏 估 计量 p), 则 称 ¿g 29914509 (ФСУ) 
自然 还 可 依赖 于 Kis 7775 хь, Yis 7779 X, 已 知 且 无 随机 性 ,这 
个 依赖 关系 不 必 指 出 》。 若 C 为 + X р Е, ЖАТТА с, 
cj 而 e; ECG = 1, y г), К C8 为 可 估 的 ， 

-定理 13 设 cf 可 估 ，、 则 必 存 在 с'@ 的 形 如 a'Y 的 线性 无 偏 
für. X 8 可 估 的 充 要 条 件 为 ¿€ o (X). 

证 .首先 ,由 于 cf = Esp《Y)、 而 Y 的 分 布 只 通过 xg 而 依 

# T 89H ‹ 
ХВ — ХЁ* => с'ф==с'@*, 


D 此 处 隐 含 了 这 样 的 假定 ; 001.8), e 的 分 布 与 无 关 . жениш 
以 更 一 般 的 定义 ; EY = ХВ, СОУСУ) = o'l, WEH 1.3 的 前 一 结论 不 必 成 


нае, 2 8 p (EAR R 中 任何 向 量 为 值 ) 与 onn (X') 
正 交 , 则 必 与 t 正 交 .因而 cE A). AAR, E ce AX), 
则 存在 a, 使 ¿= X'a. ХЫ E,(a'Y) = a'X8 = c'8. dud 
可 佑 . 这 一 举证 明了 定理 中 的 两 个 结论 . 

以 8 记 8 的 性 一 个 LS 估计 ， 当 cg upfhh. Fk eÉ 35 сгв 
的 LS 估计 ， 易 见 此 时 cé 与 的 取 法 无 关 ， 事实 上 ， 若 Ao ЯП 
Êm 为 两 个 LS (hib. W X'Y = SÁ = Sfo. W c8 vif. 4 
e € (X) — UM (XX) = UE (S) = -63 )， 故 存在 4， 致 
€ = S'd, fy 

e'ho "d 458. = d'S == c'Ba. 1 
BARAKTE. 

定理 1.4(GM EE) СМАЖЕНЕ. £ c8 可 估 ; 则 在 c'8 
的 一 切线 性 无 偏 佑 计 类 中 ,其 LS 估计 <' 汲 是 唯一 的 方差 一 臻 最 小 
的 估计 . 

证 . 先 明确 一 点 : АЕН Е, се 的 线性 估计 可 以 包括 形 
如 o' Y 中 .ao 的 非 齐 次 估计 . 但 要 这 估计 为 无 偏 ， 必须 св = 
Eg(a'Y + а) = a'X8 + а, 51-0) 8 € R^. l XX 82-0 得 
оо = 0, НЮ, TRTA RR KRE Fn. 

现 证 с EA. DR 8 可 佑 , 由 定理 1.3 及 其 证 明 ， 知 存在 a, 
致 < 一 ga E c'm d'S. 9 (1.00), 7H P= XY, ik 
EB) — «ХХВ = a Sp = c8, 因而 ¿ó 为 68 Z— 4815 
iF. i ` 

MER се 之 一 无 偏 估 计 a'Y。 由 无 偏 性 有 CB Еа) = 
«XB ХВ, aX = c. 而 єё= a XB， 依 (1.15), 有 

уагв„(є'#) = e XS X'a o? == a'Pyac? 
一 ка to) == a? Pall. 
另 一 方面 ;有 vang(s Y) = olal. RAHE a lal Psal, 
Ж cB 的 方差 总 不 会 超过 a'Y 的 方差 ， 而 要 lal 一 1Рха|, AA 
RD a € AX) REE 2,18 а 一 Ха. 这 时 有 
c'Ê = a XÊ = ХХВ = 0050 = ХҮ = aY, 


这 证 明了 c 公 为 使 方差 最 小 的 唯一 的 线性 无 偏 估 计 。 定理 证 毕 . 
这 个 重要 定理 疯 定 了 在 GM 模型 下 , LS 估计 的 重要 地 位 ,如 
果 有 线性 模型 (1.87 且 仍 假定 条 件 (1.7) RZ BRE GM 条 件 
(1.15), 假 定 
COV(e) = V, V > 0 C 51,0 < о < оо,о*% ЖАЙ. (1.18) 
则 关于 线性 函数 c'8 的 可 人 知性 定义 ,LS 估计 等 ,并 无 改变 。 因 这 些 
ЯР у 的 均值 向 量 而 不 依赖 于 其 协 差 阵 , (НЕ, V > I ñQ 
Юе. З се 的 LS 估计 c 一般 已 不 再 具有 定理 1.4 中 所 
' 描述 的 性质 ， 事实 上 ， 上 述 模 型 不 难 转化 到 GM 模型 pid 
| 2 一 үзү, ШЖ 
| Z = Ўв + 2, 
其 中 K yg, g ye, 而 
COV(2) = V PVV? ug, | 
获 对 Z 而 言 ,GM ЈЕ. Ж ep 可 估 , 在 Z 模型 求 8 之 任 一 LS 
估计 :为 
Ë = (X'VOXYX'Y p-uz 2 = (X'V iX X'V Y, (1.19) 
因而 得 到 (所 GM 定理 ) 在 一 切线 性 无 偏 估计 类 中 ， 崔 一 的 一 个 无 
伪 方 差 最 小 估计 ,为 | | 
eB = XVOXx)XVOY. (1.20) 
这 个 估计 在 文献 中 常 称 为 “最 佳 线 性 无 偏 估计 ” (Best. Linear Unb- 
iased Estimate， 简 记 为 BLUE). C5 c'l 的 在 了 模型 下 的 LS 估计 
(х'хух'Ү 一 般 当 然 不 同 . 有时, 也 称 (1.20) 为 GM 估计 .于 
是 ,在 GM 条 件 下 ;GM 估计 重合 于 LS 估计 . 

(Ж) e 的 估计 假定 线 福 模型 (1.8) 满 足 GM 条 件 (1.7) 与 
《1.15)， 于 是 有 估计 e ВЕЙ. ER E 之 一 LS 估计 ЁСЕ о? 
时 ,不 必要 求 8 可 估 ).， 称 

Br У, xb, i= 1, e. n 
JRZ. 易 见 它们 不 依赖 于 的 选择 《因为 rs 为 可 舍 , 而 x; 20 
其 LS 估计， 前 已 指出 , 它 与 的 选择 无 关 )、 通 常 , 以 bisito ðn 
的 平方 和 , 除 以 适当 常数 (使 之 成 为 无 偏 的 ), 作为 = 的 估计 , 称 之 
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为 “基于 残 差 平方 和 的 估计 >. 记 5 = (.-e.54Y.8 6 = Y- . 
XÊ = Y 一 XS-X'Y = (1 一 Px)Y, і Рх 因而 1 — Ру, 为 对 称 
ЖЕ, 
jol? = Y'G — PY (I — Px)Y = Y'G —P:)Y. (1.21) 

注意 到 (1 一 Px)X 一 0( 据 (1.3)), 有 

(1—Ру)Ү = (I — Px)X8 + (I — Pe = (1 — Pe. (1.22) 
因此 由 (1.21) 又 有 | 
` qal - eG Poe. (1.23) 
利用 (1.7) 及 (1.15), 由 (1.23) 得 

Еа = eu — Px) — о) — lP) 
= па? — PkPx) = (n—r)?, r = rk(X), 

故 知 | SEN 
Ф == [8l] (n — ғ) (1.24) 
为 加 之 一 无 妨 佑 计 . E (1.23) Е (55,8 


мр ~ 32-3 d maj (бы) 
其 中 | 
Spara =p Miüjel,: (1.26) 
表达 式 (1.25) 对 研究 ёк жи каж, и =й. 


$12 判决 遂 数 与 容许 性 


《一 ) 统计 判决 理论 的 基本 概念 ” 设 X 为 一 随机 元 , 取 值 于 空 
HZA. Ж, XE” EO 22 1) 的 随机 向 其, 而 S 是 R? 或 其 一 
Borel 子 集 . 取 定 一 个 由 A^ 的 某 些 子 集 构成 的 o 域 多, 则 可 测 空 
ECA , 儿 ) 称 为 X 的 样本 空间 ， 当 C 为 RK" 或 其 一 Bore +E 
Ho BARAR 的 一 切 Borel 子 集 构 成 的 т 域 ， 这 时 样本 空间 
(AC ,级 ) 称 为 是 欧 氏 的 ， 

X 的 概率 分 布 就 是 狼 上 的 一 概率 测度 P. 在 统计 问题 中 , РЖ. 
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是 完全 已 知 , 而 是 依赖 于 参数 6, 0 ШЕР ө, ба 
(Hl. 通常, @ 为 mw 维 (m > 1) 欧 氏 空间 或 其 一 Bore! TR. XË 
分 布 族 记 为 (Ps,0 є Ө), 

设 对 XX 进行 观察 而 得 到 样本 x。 统 计 淹 决 间 题 ,就 是 要 依据 x 
作出 某 种 决定 或 采取 某 种 行动 ， 例 如 ， 设 问题 是 要 估计 9 的 某 一 
少数 g(6) 之 值 , 则 采取 一 个 决定 或 行动 。 意 味 关 依据 样本 x 而 给 
出 一 个 值 了 (x), 作为 g(0) 之 估计 值 .在 一 个 确定 的 问题 中 , 所 能 
采取 的 行动 的 全 体 4 一 般 是 确定 的 。 以 上 面 估计 g(9) 为 例 , 可 取 
4 = (g(6):0€6), 或 取 4 为 包含 {g(9):96e Ө} 之 一 适当 集合 . 
4 称 为 行动 空间 ， 在 大 多 数 情况 下 ， 4 总 是 欧 氏 空间 或 其 一 Borel 
TA. 

为 评价 和 比较 所 采取 的 行动 的 后 果 , 引 进 损失 函数 LO a)» 
定义 于 OCO 和 ae 4. 它 表 示 当 参数 值 为 9 而 采取 行动 = 时 ， 
所 遭受 的 损失 .损失 函数 是 非 负 的 , 且 要 满足 一 定 的 可 测 性 条 件 . 
在 4 中 引进 由 其 某 些 子 集 构成 的 o 域 闵 ,, 要 求 对 任何 固定 的 9e 
Ө, L(6,a) 作为 a。€ A 的 函数 ,是 Bord 可 测 的 .在 有 些 问 题 中 
ЖЕ @ 中 引进 由 其 某 些 子 集 构 成 的 c Ёё. AER 1(#,а) 
作为 (8 x A, 4, X 8) БИИ „35 Borl! EN. 

жаш Б (RT. Z. Рә, Өє 0). #75238] 4 БАЙ Ж 
Ж 工 (6。 a)， 称 为 一 统计 判决 问题 的 三 要 素 ， 给 定 一 统计 判决 
问题 就 等 于 给 定 这 三 个 要 素 . 

定义 于 (有 ,3 YET (А, 28. BS ETUR H oC) RAA 
决 函数 。 或 更 确切 地 称 为 非 随 机 化 的 判决 函数 .本 书 将 只 涉及 这 
种 判决 函数 .判决 浮 数 是 统计 判决 问题 的 “ 解 * 和 的 形式 ， 因 为 根据 
8(x) 一旦 有 了 样本 x BEA A 000) 作为 所 采取 的 行动 , 当 
参数 值 为 9 时 ,使 用 判决 苑 数 8 所 遭受 的 平均 损失 为 


К(Ө,в) = EoL (0, 3(X)) = | L6, в(х))4Рә(х), 0€ 6. 


ЖКА 8 的 风险 函数 ， 在 目前 尚 称 流行 的 理论 中 ， 两 个 判决 函数 
的 优 劣 比较 ,全 基于 其 风险 函 数 ， 因 此 ,自然 地 称 两 判决 函数 3 和 
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8, 等 价 ， zx R(8,8,) == R(8, 8,) 于 上. ж ё, 一 致 优 于 8, 车 
R(0,8) < R(0,8,) 对 任何 @є Ө, La 与 2 不 等 价 。 又 若 存在 
一 判决 通 数 8#*, 使 对 任何 判决 函数 5, 或 者 有 6 等 价 于 5*, 或 者 有 
a*t 一 致 优 于 5. 则 称 5* 为 所 给 判决 问题 的 一 致 最 优 解 。 在 这 种 
情况 下 ,采用 8# 有 足够 的 理由 .然而 ， 在 一 切 有 实用 意义 的 问题 
中 ,这 种 一 致 最 优 解 几乎 都 不 存在 ,因此 必须 考虑 其 他 较为 松 一 些 
的 标准 ， 以 便 在 这 种 标准 下 可 挑 出 最 优 的 判决 函数 . 下段 中 谈 到 
的 Bayes 解 就 是 一 个 重要 的 例子 ， 不 过 , 一 致 最 优 准则 虽 没 有 实 
用 价值 。 有 一 个 与 之 联 带 的 概念 ， 却 是 极为 重要 且 梅 成 本 书 第 四 
章 的 主题 。 那 就 是 判决 函数 的 可 容许 性 ， 简 而 言 之 ， 若 8 为 一 判 
决 子 数 ,而 不 存在 一 致 优 于 3 HIRR, MR 5 为 可 容许 的 , 否 
则 为 不 可 容许 的 ， 显 然 ， 可 容许 性 与 样本 分 布 族 及 损失 函数 的 选 
择 有 关 。 又 ,可 能 在 问题 中 已 对 所 人 允许 使 用 的 判决 函数 作 了 限制 ， 
例如 ,在 点 估计 中 , 限制 使 用 无 偏 估 计 、 线性 估计 之 类 。 一 般 , 设 
多 为 允许 使 用 的 判决 函数 类 ,而 56. Fro 为 多 可 容许 的 ， 著 
不 存在 60, 95, БГ 8。 显然 , 一 判决 函数 5 是 否 可 容 
Te, STI 0189235 2 Ж. 

以 上 就 是 A. Wald 在 本 世纪 四 十 年 代 未 期 所 发 表 的 统计 基 
决 理 论 的 极 简略 的 纲要 。Wald 创立 这 个 理论 的 目的 ;是 为 了 要 把 
形形色色 的 统计 问题 归纳 到 一 个 统一 的 模式 内 ， 三 十 年 来 的 统计 
发 展 史 大 体 上 证 明了 这 个 想法 在 实质 上 并 未 实现 。 但是， 这 个 理 
论 对 近代 统计 的 发 展 产 生 了 重大 的 影响 .从 理论 的 角度 看 ， 它 提 
出 了 不 少 新 闻 题 以 至 新 的 研究 方向 ， 容 许 性 就 是 其 中 之 一 。 从 实 
味 的 角度 看 , 它 把 统计 问题 的 解 看 成 一 种 行动 ,通过 分 析 行动 的 活 
果 一 一 损失 ， 使 问题 的 提 靶 及 其 解 更 能 适合 特定 的 应 用 ， 和 而 在 此 
以 前 ,人 们 只 和 券 虑 统计 推断 ,在 这 里 ,问题 带 有 一 般 的 性 质 ,而 不 考 
虑 所 作 推 断 在 种 种 特定 情况 下 可 能 招致 的 后 果 . 

(=) Bayes 解 沿用 前 面 的 记号 ,在 (8, 28.) 上 引进 概率 
测度 ы, торо 的 “ 先 验 分 布 ”"， 设 判决 函数 6 的 风险 函数 为 
R(8, 5), 称 


Ru(8)= {к (0,8)4H(8) (1.27) 
29 9 BJ. Bayes 风险 ， 
若 判 决 函数 65 满足 条 件 : Rula) < Ra) HETARA 
TREO 成 立 , 则 称 8a 为 在 先 验 分 布 玉 之 下 的 一 个 Bayes 解 。 
从 判决 函数 的 优良 性 准则 的 观点 看 。 先 验 分 布 吾 不 过 是 提供 
了 一 个 “ 权 ”， 借 以 对 风险 函数 RO, 87 进行 加 权 平 均 , 而 获得 用 
以 比较 的 标准 Ra(5)。 然而， 从 实用 的 观点 看 ,五 表 达 了 在 观察 
芭 样 本 XX 之 前 对 98 的 了 解 ， 因 而 它 的 选择 应 与 这 一 了 解 一 至 ,这 
正 是 互 获得 “ 先 验 分 布 ”这 名 称 的 由 来 。 从 统计 学 中 很 有 影响 的 
“Bayes 学 派 ”的 观点 看 , 在 任何 统计 间 题 中 , 先 验 分 布 都 是 一 个 必 
不 可 少 的 要 素 。 如果 没有 客观 的 依据 去 确定 这 个 分 布 ， 则 也 可 以 
用 主观 的 考虑 去 确定 之 . 这 种 观点 和 实践 在 统计 学 界 引 起 了 争 
论 : 涉 及 许多 带 哲 学 性 的 统计 基础 问题 ;在 此 我 们 没有 必要 涉及 这 
些 问题 ,因为 在 本 书 中 ,Bayes 方法 只 是 作为 一 种 理论 论证 的 工具 ， 
先 验 分 布 的 选择 是 根据 论证 的 需要 而 不 是 与 实际 是 否 符 合 的 考 
È. 
下 面 来 讨论 求 Bayes 解 的 问题 。 我 们 限于 考虑 一 种 在 实用 上 
最 重要 、 最 常见 并 且 适 合 于 本 书 要 求 的 情况 . 设 在 绍 上 存在 0 有 
限 测 度 gg; 使 对 任何 86€ Ө,Ро 对 z 绝对 连续 . id Po 对 4 的 Radom- 
Nikodym 导数 GPelx)jdm 为 f(x,98)。 且 谈 


0 二 | 10H) 二 co， 对 任何 z€ 2” ‚ (1.28) 
(也 可 以 有 一 个 例外 集 CEB, PCC) 一 0 对 一 切 eeg), WN | 
称 А 

КӨ!х)4Н(8) = f(x,0)4H(8) 7 (Санс Ф) (1.29) 
为 给 定 * 时 ,4 的 后 验 分 布 , 它 实 际 上 就 是 通常 的 条 件 分 布 ， 为 方 
便 计 , 记 нб) 一 | f(x,$)4aH($)。 称 


rala) = | L030) OHHO) аєа (1.20) 
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为 行动 «(在 获得 样本 x IRURE DUE. 设 存在 判决 函数 ot Qe), 
使 
„(8% (к)) = in(ri(a):a€ 43, H) x € Ж, 
WE 8*(x) 为 "后 验 风 险 最 小 的 解 "~、 有 如 下 的 重要 定理 ; 
定理 15 后 验 风 险 最 小 的 解 3* 必 是 一 个 Bayes HE. 
WE. 只 要 注意 到 : 任 一 判决 函数 S 的 Bayes .风险 可 表 为 (E* 
表示 对 (9,X) 的 联合 分 布 取 期 望 ) 


R&(8) 一 E"L(6,5(X)) 一 b aldrie (131) 


则 证 明 一 目 了 然 . T 

在 后 面 我 们 需要 用 到 Bayes 解 的 唯一 性 问题 ， 首 先 要 明确 什 
么 叫 唯一 性 如果 任 意 两 个 Bayes 解 都 等 价 , 则 称 Bayes 解 唯一 . 
下 面 的 定理 对 本 书 的 目的 已 够 了 : 

定理 1.6 设 以 下 几 条 满足 

1° 对 任何 z€ ФС, 7. (а) fE25 а 的 函数 ,有 唯一 的 极 小 值 点 
C) B. 8*GO 26 (97, #)— (A, A) 可 测 ( 即 8* 为 一 判 
RAS). 

2° В,(5*) < co, 

3° Ж Ce 2 WÑ (Санс) = 0, 则 Po(C) 二 0 对 一 切 ` 
6c8, : 4 

则 3* 为 唯一 的 Bayes WE | 

ШЕ. 2% 为 Bayes 解 的 事实 已 见 定理 1.5。 由 表达 式 (1.31) 知 ， 
着 5 为 任 一 Bayes 解 , 则 必 有 | fdal) 一 0， 而 

C = {rire RZ, 8) A e. А 

因 若 不 然 ,由 (1.31) 及 Кь(8*) < co 而 得 Ru(8) > RaG*), 与 
8 为 Bayes 解 巴 看 。 查 根据 假定 3°, 有 Po(C) 一 0 对 一 切 0 € @, 
从 而 得 到 R(0,8) = R(6,5*) FO k. 即 o 等 价 于 8*。 这 证 明 
了 所 要 的 结果 . 

在 本 世 中 我 们 限于 卷 虑 平方 型 的 损失 函数 :  YEO UNT R 
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的 情况 ,为 


L(8,a) = (0 — ay, (1.32) 
Ө ВЕТ R^ 的 情况 ,为 | 
L(0,a) = (0 — a) B(0 — в), Я (1.33) 


其 中 B 0 为 已 知 的 p 阶 方 阵 。 最 常见 的 为 B = 1, 的 情况 ， 
这 于 有 
L(8,a) 一 . qe — al. (1.34) 
对 以 上 这 几 种 损失 函数 、 不 难看 出 定理 LS 的 条 件 1 都 成 立 。 事 
ЖЕ. 对 任何 *， 若 后 验 分 布 的 均值 Е(Ө|х) FEE >:(E(9| 
|x)) < oo, 则 它 是 rla) 的 唯一 级 小 值 点 . 故 E(81x) 就 是 后 验 
风险 最 小 的 解 . 在 定理 1.6 的 条 件 下 , 它 是 唯一 的 Baye CEO 
z) 不 存在 或 Е(Ө|х) 存在 但 r,(E(0|x)) 一 oo 的 情况 另 当 别 
论 , 但 在 本 书 中 不 会 出 现 这 种 情况 ).。 
(=) 关于 可 容许 性 的 车 干 结果 ”在 (一 ) 中 已 给 出 了 判决 省 
数 可 容许 性 的 定义 .本 有 段 将 给 出 判定 容许 性 的 一 些 结果 ， 
下 面 的 结果 是 初步 的 . 
定理 1.7 Ж Bayes Ж 65 唯一 (回忆 前 面 关 于 Bayes 解 唯一 
的 定义 ), 则 sa 为 可 容许 . 
证 明显 然 : 因 若 存在 一 致 优 于 би АВА о, 则 5 也 是 一 
Bayes 解 . 因 8 并 不 等 价 于 8a* 这 就 与 Bayes 解 的 唯一 性 矛盾 ， 
1958 Е, Kardin! 研究 了 单 参数 指数 族 均 值 的 可 容许 估计 ， 
获得 了 充分 条 件 . 1964 年 ,成 平 外 推广 了 Капа 的 结果 。 下 面 介 
绍 他 们 的 工作 . 
设 筷 的 分 布 为 指数 族 | 
(c(8)e?T 9 dn(x), a < 0 < b), (1.35) 
此 处 жс 有 限 测 度 , а 可 以 为 一 co ;5 可 以 为 二 iE o0) 一 
EsT(X), PCO) = varT (X). WERS TER. A 
(0) — — (0) 0) 
0°(0) = o (0). 
要 估计 w(9), 损 失 函 数 取 为 


L(0,d) = (d — o(8)). (1.26) 
定理 1.8 (Karin) 在 分 布 族 (1.35) 下 ， 如 果 存 在 0,€ (а,Ь) 
和 常数 1 关 一 1, 使 得 


8, B 
lim í c^ (y)dy == co, (1.37) 


lim ү c7 (y)dy = со, | (1.38) 
8-5 Ja, 


则 4,(X) = (1 十 2)™T(X》 为 在 损失 函数 (1.36) 下 ，w(9) 的 可 
容许 估计 ， 

成 平 把 这 个 定理 推广 为 

定理 1.9 (成 平 ) 设 和 的 分 布 为 指数 族 (1.35)。 若 存在 0, € 
Cas6) 及 常数 а ае 一 1 和 常数 ,致使 


e, 
lim | °е”%бу)е-%®ду = со, (1.39) 
й->а 


(9 
lim |. c7 (y)e "dy = оо, (1.40) 


则 20) = (TOX) 十 AD) 十 21) 为 在 损失 函数 (1.36) Fo 
e(8) = ET (X) 的 可 容许 估计 。 
Ш. 车 存在 估计 4 (X) 使 得 
Е,(20Х) — ol) Y 2 Eld (X) — wl0)), (1.41) 
W EZ,CX) 存在 且 有 限 . id 2.09) 一 Es4(X) — e(8). 由 CC 一 
RAŠA A 
Es(d(X) — (0)) — 52 (0) + varad, (X) 


20 + |-4-к„абх)у| | к» Ds coro] y 


= (8) + (о°(Ө)у [21 (8) + POF. (1.42) 
"e 
E (2 (X) — o(8)Y = (1 + A)"7[o(0) + 22(о0(0) RYN. 
(1.43) 


把 (1.42) 和 (1.43) 代 进 (1.41), 得 
(1 +IP) + Vol) — 1 


* 17 + 


2200400) + (a (9)) L4 (92 -F o (0)]° (1.44) 
А ó (X)  Egd( X) — (Өу= —А(1 + 4) !(9(0) — к), Ж 
4 

£(8) = ba (O) — b4(0) = ba (O) + А1 + 4) (0(0) — А), 
由 .44) 可 得 | 
[g(0) — AX1-F 2) (0(0) — k)P 
+ CPE + 2) !6'(0) + (Ө) 
= (1 + 22 [o (0) + 2(0(0) — &Y1. 
上 式 经 初等 简化 ,得 | 
g0) + 2(1 + a) [lg (0) — 2(0(09) — k)g(0)1 


< (PODE OT < 0. (1.45) 
记 109) = e(6)e99g(0), (1.45) 式 可 改写 为 . 
c"^(8)e7 (8) + 2(1 + 4) 1 (0) < 0. (1.46) 


34.2 > 一 I Bf G < 一 1 的 情况 完全 类 似 ), 由 上 式 可 知 IC) 
0* 即 100) 在 (ea:2) 上 非 增 , 故 存在 9 є (а„5) ERE OKOL 
时 ,1(9) 或 者 恒 为 零 或 者 恒 不 为 零 。 若是 后 者 , 则 由 (1.46) 得 ` 


AU0 = —1'(8)17(8) > 27(1-- 23)c7(0)e-99, 


| 0 <6 <, (1.47) 
于 是 由 (1.40) 知 ; 当 0+0 时 
1700) — 9) 2 21 + 2)| $7 Ne dy — ©. 


由 此 可 知 lim? (8) 一 0， 同 理 可 证 lim 1(8) 一 0。 再 由 工 97 的 
非 增 性 知 ,1(6) == 0,Ғ Cab) 上 。 因 而 g(0)= 0, T (a,6) E. 
ik Eld (X) — 4(Х)) = ba, (O) — b (0) = 809) == 0, T Ca.) 
E. 由 指数 族 的 完全 性 知 ,do(X) 一 dX) а. е. jy， 因而 (1.41) 成 
立 等 号 ,于 (a,5) 上 .这 就 得 到 4X) 是 可 容许 的 ， 证 毕 . 

最 后 介绍 两 个 狂 质 比较 特殊 的 关于 容许 性 的 结果 . 

定理 1.10 设 X 的 样本 空间 和 分 布 族 为 (和 282 Pos 0 € Ө), 
这 里 dP (x) = р(х» 6,, 0)0du(x), # 29 58 р © 有限 测度 ,8 =” 


* 48 8 


(6,,0.,6,€ 8,,; = 1, 2, 9; 为 Ri 或 其 Bord FE. U ZZ; W. 
Ө; 的 一 切 Bord 子 集 构成 的 o 域 , ¿= 1,2. É 5 (C) 定义 于 
0,€ 8, 和 CE 2, E, 对 固定 的 Ө›› Eol C) 是 2. 上 的 概率 测度 ， 
而 当 C 国定 时 ,#6,(C)》 作 为 8, 的 隙 数 , 为 22, 可 测 . 令 

р) = | 901.925. 8). 
假定 有 ? 

[P,(<,0,):8; € Ө,} ~ (p(x,0,,01):0; € @,,; = 1,2}, (1.48) 
KAMRA L(8,a) 与 无 关 ， 改 可 写 为 (в). 假定 当 
Ө, ЕЕ, а 的 严 山 函数 ， 

考虑 变量 Y ,其 样本 空间 和 分 布 族 为 { 纪 ”， pn 
Ө,є Ө,}› dip UR dE. WE aY) 可 容许 且 其 风险 函数 有 限 ， 
则 在 处 的 上 述 分 布 族 之 下 ， a (X) WETAH. 

证 ”车 存在 5 (X) —# 3X) д] 


WTO EAO 


<| LC080 ba 149) 
对 一 切 (8,8) € Ө, x ө, 且 不 等 号 对 基 个 (6.6,) RA. MEM 
Re 记 在 Y 问 题 中 的 风险 函数 , 则 有 有 
к,а) = | L0) 00 02242 


es NN TRE 


СООСУ ОСУ 
= Е,(Ө,„&(Ү)) < co, 
由 aY) 在 了 问题 中 的 可 容许 狂 , 及 109,8) 为 # 9773р, 
用 在 定理 1.8 的 证 明 中 使 用 的 方法 可 知 : 车 记 C = {у:ує.27, 
1) 指 两 族 分 布 对 等 .确切 地 说 ,C1,48) 表 示 ; 对 任何 СЄ | 


{ гк» 6220) —-0 对 一 切 0,6, eh FOUDRE 
8,69, ¿= 1,2. . 
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8,0) 75,2). ЙН 
ЕСУ = 0, 一切 6, € @,, 
再 由 (1.48), 得 
(200,0) 4800) = 0, 一切 Been i— 1,2. (150) 
由 《1.50) 得 知 , (1.49) 对 -一切 (96 2) 成 立 等 号 ,与 前 述 该 式 在 基点 
成 立 不 等 号 矛盾 ， 定 理 证 毕 . | 

注 1.1 Ж p(x.0,0.) > 0 1—0 xc ЯП Ө;є Ө, — 
1，2， 则 条 件 (1.48) 满 足 ， 

下 一 个 定理 有 一 个 特点 ,就 是 息 及 与 祥 本 有 关 的 损失 函数 ,部 
Xn L(0,a,x) RRAK. k AUS БЕКЕН Ид 3029 : R (0,8) 
一 Es[L(0,5(X), X)1. 

定理 1.11 维持 定理 1.10 的 全 部 记号 与 假定 , 只 是 损失 函数 
L(0,, Ө, a), 55 Ө,, 6, 都 可 有 关 , 又 假定 р(х, 8,,-0,) > 0 对 一 切 
LEX K 6,6€@;, i= 1,2, $ 
L(65a,) = | L(,0, a)pG.0.,0)8.G46) / вебу»). 
FARE 了 Y， 其 样本 空间 和 分 布 族 为 (07, Ba ply 0.)da, 
0,єӨ,), HA LARRA. WR aY) 可 容许 且 鞭 风险 函数 
有 限 , 则 在 藉 的 所 述 分 布 族 ( 见 定 理 1.10) 之 下 ,ss(X) 也 是 可 容许 
fg. 

证 .与 定理 1.10 BÓ. 55, ЖЕ 


R(6,, д,» aX) = {101,010. 6) Plena) 


= j. L(8,,0,,9, (0 ) p( x ,0,,0:) du () = R(8,,0,, &X)) 
对 一 切 8; € 8,, : = l, 2, 则 有 
|. Ri: 508.008) { R CU048549) 


对 一 切 8, € 9;, ПП 


HH. 


n L(0,, & Cy) > M: 8 du) 
<j L(8,,9, 6G) .y)pi(y,8duCy) < co, (1.51) 


出 定理 条 件 知 、 L(0,,a,y) 为 a RAR, H S p,Cy,09,) > 0 
对 一 切 ye Ж K 名 € 8;,， 因 而 ,仿照 定理 1.10 的 推理 : 知 0. (x) 
=“ 6,6), a.s. rr。 因而 有 

R(0,, Ors 4(X)) = К(0,,0,, CX) 
对 一 切 0, € @,, :一 1];2， 于 是 证 明了 CX) 的 可 容许 性 .定理 
证 毕 . 


* 


$ 1.3 ”概率 论 中 的 若干 极限 定理 


(=) 引言 ”本 书 中 有 一 大 半 篇 幅 是 用 于 讨论 线性 模型 参数 
的 估计 量 的 大 样本 理论 ， 即 在 样本 大 小 无 限 增加 时 、 有 关 佑 计量 
(在 概率 意义 下 ) 的 极限 性 质 ， 罗 此 ,在 后 而 的 叙述 中 ,我 们 将 要 使 
用 很 多 关于 极限 理论 方面 的 结果 。 这些 结 果 的 大 部 分 可 以 在 较 深 
的 概率 论著 作 , 例 如 [1] 中 找到 . 另 一 些 则 需 查阅 更 专门 的 著作 .为 
方便 读者 ， 我 们 把 后 面 需 用 的 结果 在 此 作 一 个 整理 。 这 有 两 个 作 


用 : 一 是 把 需 用 结果 的 确切 形式 表述 出 来 , 便于 直接 引用 ， 一 是 . 


“ 对 不 其 熟悉 这 些 结果 的 读者 ,~ 将 介绍 合适 的 参考 文献 。 由 于 结果 
多 且 涉 及 曾 广 。 不 可 能 在 此 给 出 所 有 这 些 结果 的 证 朋 .. 

WD, ,P) 为 一 释 率 空间 ， Tis Tz’ ek T XE VF RES 
ЕЕЕ, Е. Fo ++, ЖЕП У ВЕК. 如 所 周 
知 , 在 概率 统计 中 常用 到 的 收 谷 性 有 以 下 四 种 : 

1. 依 概率 收敛， 称 Т„ бона тэмат, эт, жой 
Б e> 0 linK|T. — T| 2 s) = 0. : 

2. 以 概率 1 收 伍 或 称 几乎 处 处 收敛 。 称 Ta 以 概率 HE 
处 处 收敛 于 了 并 记 为 "Hm T,= T, a.s. “Т, >T, a. s.", 5 
PClinT, = T) = 1, 


. 21» 


3.r(r 27 0) WERAK. K T, r Br FSC ak p T 3F W 29 

T. TE lim E|T, —T| 一 0。 当 + 一 2 时 也 常 称 为 均 方 收 
ж. 

(OA di D fir Р, (КӘ ЖЕШСЕ FAA Р„ ЖЕ, BN F 

的 任 一 连续 点 +， 有 lim F,(*) 二 F(x). 我 们 也 可 以 说 一 串 随机 变 


量 依 分 布 收 敛 于 某 个 随机 变量 或 者 其 分 布 ， 又 如 记号 FON, 


1), H T, 5 N(0,1)， 也 用 于 表示 T, REAN Е, {КУЛИН 
于 标准 正 态 分 布 N01). 

如 所 珊 知 ,这 几 种 收敛 性 的 关系 如 下 : 
d cdi Ут. T = F, F 

T. LT 

ЕЖЕЙ. 

在 数理 统计 学 中 。 当 使 用 前 三 种 收敛 性 时 ,多 半 是 一 常数 ， 
玫 示 某 种 有 待 估计 的 参数 (例如 ,了 可 以 是 线性 模型 (1.8) 中 的 回 
BARE 8, 或 随机 误差 方差 2), Tü T。 则 是 其 某 种 估计 量 。m 
BEARREAN. T, 在 某 种 意义 下 收效 于 Т, оч ЖАЛ 
无 限 增加 时 。 估 计 的 精度 可 以 在 一 定 意义 下 任意 地 改善 ， 这 种 性 
质 通常 叫做 “相合 性 ”， 是 最 重要 的 一 项 大 样本 性 质 。 与 各 种 收敛 
性 相对 应 。 有 以 下 几 种 相合 性 : ` 

1.888645. M T, 为 工 的 弱 相 合 估计 ,或 者 说 了。 有 弱 相 合 


性 ， 若 T, T. 
2. 强 相合 性 。 称 T, т НАЧ, REDT. sama 
Ж T, — T. a.s. | 
3. > 阶 平均 相合 性 . ЖТ, 为 工 的 > 阶 平均 相合 估计 。 或 者 
说 了 。 有 r 阶 平均 相合 性 , 若 T, 站 外 ， 当 7 一 2 时 , 常 说 外。 有 均 
Jine. 
依 分 布 收敛 应 用 于 数理 统计 也 比较 广泛 。 最 重要 的 场合 是 并 . 
г 22 ° 


` 或 有 渐 近 正 态 性 ， 若 存 在 An > 0 和 B, GS EO. Е (Ta E 


BA, S N(0,1), 一 般 B, RI AZ 就 是 了 ,的 均 信 和 方差 。 有 时 
也 将 上 述 事实 说 成 T, BEEKIE N(B,, 41)”. ERMA 
计 中 , 除 正 态 分 布 外 , 其 他 其 些 分 布 , 例如 闪 分 布 ,也 常 作 为 种 种 
统计 量 的 极限 分 布 ,但 本 书 中 只 磁 到 正太 分布 的 情况 . 

(二 ) 依 概率 收 伊 于 0 的 落 千 结果 ( 弱 大 数 律 ) 设 7,,7,,… 


HELFT P) ERI ERILE, STR T, 0 成 立 的 
条 件 , 使 用 最 广 且 最 方便 的 是 

Ет Ё|Т»„|” = 0, HEA r> 0. (1.52) 
当 (7,) 一 致 有 界 时 ,条 件 (1.52) 对 任何 r > 0 也 必要 。 若 以 大 记 


T, 的 特征 函数 , 则 T, > 0 的 一 个 充 要 条 件 为 | 
limfa) = 1, 对 一 切 z€ R'. (1.53) 

一 个 重要 情况 是 T, - (X, Tcr X. n, Hth Xi, Xi 
相互 独立 。 下 述 被 称 为 “古典 大 数 定律 * 的 结果 ,是 Kolmogorov 首 
先 证 明 的 : 

定理 1.12 [c.i X, 的 分 布 函 数 , 则 T。 必 0 的 充 要 条 
件 , 是 以 下 三 条 同时 成 立 : 

1. >Í 46,00) — 0, 


1z1 |х\>» 


1 
духе | xdG;(x) — 0, 
fa? lr!<e 


n 


А {| Per (as 26:60 | ры; 


证 明 见 [1]，P. 278—280, 
本 书 中 还 要 用 到 
Т, = Xa Hcet + Xag n= 1,25, ++ 
的 情况 ， 此 处 对 固定 的 >， 随 机 变量 Xas etto Xat 相互 独立 。 


° 23 * 


wl 


ХИ Gn: 记 Х, 的 概率 分 布防 数 , 有 
定理 1.13 Еф т>0„>кх 


пб) = | «4быб)» 


оз (r) 一 | x'dG,(x) — ат). 


|rl<r 
则 zs 二 0 的 充 要 条 件 是 以 下 三 条 同时 成 立 : 
DA 26,00) — 0, 对 任何 & > 0, 


IPIE 


2. > a, (7) — 0, 


. < 
3. >; oar) d 0, 
фта 


EHAA], р. 317. 
X11 NENA 及 i, 1 <; < ko X955 XY Ie ROSE 
称 , 则 充 要 条 件 转化 为 : 


Xn 
LO 464000. HEB e > 0, 


223-4 
Kn 


EX xd Gu) — 0. 


(=) 关于 а. 5. 收敛 的 若干 结果 验证 T, — 0, a. s. 的 一 个 


方便 而 常用 的 结果 如 下 : 
定理 LIA ЖУРЕ Рон 
2; rr. еи (1.54) 


MÜ) T,— 0, а. su xt To Tas c -相互 独立 , 则 条 件 (1.54)( 对 
Bub 6 > 0) 也 是 必 变 的 . 
EBA 011, р. 228—229, 


X12 若 对 某 个 ->>0 有 У EJT, < оо, 则 T, — 0. 
= 1 i 


$24 * 


9. Nite > 


ЖА rhe 


人 


tton A ЗООМ 


2. $. 
另 - 一 个 常用 的 重要 结果 如 下 : 
定理 1.15 (Kolmogorov) VE Xi, Х,, НЕ, X; 的 均值 


方差 存在 且 分 别 记 为 a; M bs 91.2, 5. XIE(,) 为 -于 


ЖЭ, Bateo, MH $) А/В? < co RE У (Х,а) B, —> 0, 


P [1], p. 238—239, 

在 Х.Х, `` ЭЎ ВЯ, 有 下 述 由 Kolmogorov 和 
Marcinkiewicz 得 到 的 著名 结果 ; 

定理 1.16 (Kolmogorov 强大 数 律 ) 设 Xis X2，… 独 立 同 分 


布 ; 则 存在 常数 a, 使 Xn о, as.” 的 充 要 条 件 为 EX, 存 


在 ,; 且 这 时 必 有 а = EX. 

JEEP], p. 239—240, 

定理 1.17 (Marcinkiewicz) 设 Xi, Xo +++ н, XE 
HEA r€ (0.2), Е|Х,|" < со, Фа = о ЕХ, їй eral 
或 1 所 + <2 mE WA 


пі > (X; —a)—0, а. $. (1.55) 
i=l i 


BGSR EHE UNI Can) 及 re (0522,68 07^ 93 (X; — al) 
i-l1l 
T a. s. H үзө, 
值得 注意 的 是 Mj + > 1 B[.Marcinkiewicz 定理 对 Xa- 


a)/n 收敛 于 0 给 出 了 速度 o(n 70777), X. Marcinkiewicz 定理 中 
关于 XoXo … 同 分 布 的 条 和 件 ,可 略 减 轻 为 : 存在 随机 变量 XX, 致 
E|X|' «oo, H P(IX| > +) > РОХ; | Z x), 对 i= 1,2, 
及 任何 x20 CWI], р. 242), dio od 

e 25 «* 


下 面 的 定理 对 有 界 随 机 变 晕 的 大 数 定律 提供 了 一 个 充 要 条 
tE: I 

定理 1.18 (Prokhorov) 设 Xis Xas ttum ЕЖЕН o EX, та 
ЕХ, = +++ 一 0, 且 对 充分 大 的 x, 有 |X,| < enf log logs (z > 0 


为 常数 ), 则 了 ао 0, а. s. 的 充 要 条 件 为 


> exp (е / > Exi) < co 对 任何 & > 0, 
i-i ; j= + 


证 明 风 13]，p. 276, 

另 一 类 a. s. 收敛 的 条 件 与 随机 变量 的 对 称 化 的 概念 《参看 
[1] 第 五 章 $17)。 设 (X. z€ T) 为 一 族 随 机 变量 。 构 造 男 一 族 
随机 变量 (ХЕТ), 185 (Xote TY 独立 ， 且 对 任何 (eT, 
X, 与 Xi 同 分 布 。 令 ХК X, — Xi, ШЖК (XT, 1€ T) 为 {X,， 
ЕТМК. 

定理 1.19 ШШ р, ХУ 分别 记 X。 的 中 位 数 及 其 对 称 化 ， 
п ==. Ís 2, -t-a ffi {а,) 为 任 一 囊 常 数 . 则 Xn — в, —>0,a. s. 的 
ЗД). X — 0, a. s., ЦА mm — а — 0. 

证 明 见 [1]，Pp. 247. 

XH 120 设 XoXo шу, b IREM, Боо, 
且 存 在 子 序 列 (045i 1,230) 以 及 常数 < 和 c', 1 < c < 
с< =, c S b, Jb, S< c, HiIl, 2,77. W s=), Xi» 
Ta = (Sm 一 50/5 ЖЫЕП ТОД KY) 表示 变量 
Y 的 中 位 数 ). 

1. $,/b. — u(S,[86,) — 0, a.s. 

2. T, — u(T4) — 0, a. s. 

证 明 见 [1]，p. 252。 又 注意 ,出 于 Tio T RERS. Ж 
据 定理 1.14, 以 上 两 命题 等 价 于 


SPT, — и(Та) 28) < о, ХЕ в >20, 


е 26 x 


下 面 的 定理 水 及 到 随机 级 数 的 a. s. 收 伍 问题 . 对 独立 项 的 
情况 , 最 一 般 的 结果 是 下 述 由 Kolmogorov 得 出 的 所 谓 “ 三 级 数 定 
理 ”. 

定理 1.21 (三 级 数 定 理 ) 设 Xs X, cg RR Bal E 
ж, 又 对 常数 с> 0. 以 Xs d X.lax,aao (Da ЖЖ ВОНАЯ 


XO. Wj $1X.29 as 收敛 的 充 要 条 件 为 ， 对 任何 c > 0, 以 下 


== КЖЕ. | | 
1° D POX c)s 2° Dvar(Xs), 3? DEXE. 
证 明 见 [1]，p. 237, 


一 个 在 应 用 上 方便 的 充分 条 件 如 下 : 
定理 1.22 ib Х,, Х,, · “相互 独 立 ， 且 存 在 r€ (0, 2), & 


Б Е\Х,' < оо. 记 a,-0 REX Mb r < 1 XE r 2 1 fu. WJ 


2100. — as) №) a. s. Кж. 


除 独立 项 级 数 外 ， 本 节 中 还 将 用 到 另外 两 种 随机 项 级 数 的 。. s. 
ав. #К{Х,} 为 正 交 序列 ， ж ЕХ,Х, = 0 当主 天 了 称 ix.) 
为 革 差 序列 : 若 对 Же 2, 3, -' PE: Е(Хь„\Х,› ы "3 Xa) эк 0, 


а. S. 


定理 1.23” 设 {X,} 为 正 交 变量 序列 ,; 则 当 У) (oga) EXS < 


co 时 ,>)X。 为 as, 收 敏 , 又 若 Р.о Н >, Clogs) EXS/ 05 < 


со, > X,/b, — 0, a. S. 
Der 


证 明 见 [1]. p. 458. 本 定理 的 前 一 部 分 是 Raclemacher 和 
Menchoff 证 明 的 .后 者 在 1923 年 证 明 ( 可 参看 [7]，p. 88), 这 一 
部 分 的 道 也 成 立 : 

定理 124 ik (2,1 为 任 一 上 升 数列 ，B = oGog2n), 则 存在 
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正 交 变量 序列 . (X,], St D EX; < оо, (B Уух, 以 概率 1 发 


B. 
定理 1.25 it OX.) 260— BOE FEX. Н 存在 re ll,21, # 


DEX < ©, JI УХ, а. з. KACE р. 47). 


MOX, Xo ` 相互 独立 , Н EX, = EX, = +: = 0 W, 
(x.)25— XE FE P] SER 1.25 是 定理 1.17 的 1 < r < 2 部 分 的 
He". 由 本 定理 得 出 下 面 的 | 

系 13 iix. 79 — BE RESI supEX; < оо, 则 对 任何 满足 


RE У с < оо 的 序列 {c。}， csX。 为 a.s йй. 
(m 中 心 极 限定 理 及 收敛 速度 i X; Хә сс 35— Bur. 
随机 变量 ， ЕХ;= а; var(X;) 0j i751, 2. A G, id 2;065— 


a) (XAY 的 分 布 函数 ,@ 表 NO, 1) 的 分 布 函数 ， 所 谓 古 
典 中 心 极限 问题 ,就是 讨论 使 G, So 成 立 的 条 件 问题 . 这 方面 
的 基本 结果 就 是 著名 的 Lindeberg-Feller EA, 

定理 1.26 以 F; 记 X, IDA EEG = 1,2,…. ЖС, ЭФ 
Н may, о1/ 27 中 一 0 的 充 要 条 件 是 : 


1 п 
lim -gz >J Ех + а) = 0 


ДУР: 


IHEM в > 0 成 立 ,此 处 Bi 一 $) o. 

证 明 见 [1]，p. 280—282, 

紧 接着 的 问题 就 是 讨论 G, 收 化 于 外 的 速度 问题 。 有 两 种 基 
卡 关 型 ,一 种 是 形 如 M 


. 28. 。 


[G, — Ф| = sop| Gx) — 66O | =< с, 


的 估计 ,此 处 c. 为 趋 于 0 的 常数 ， 这 种 类 型 的 收 倒 速 度 称 为 一 至 
性 的 (对 x 一 致 )， 另 一 种 是 形 如 
|С, = Ф| = Сб, ғ) 

ИЕ. 一般, 当 x ЕЕ n — cob, Case) — 0; RH п RE 
而 [| -> Bj. С(а,ғ) 0. 目前 见 到 的 都 是 C(x,x) 分 解 
为 Ae, 的 形状 . 这 种 类 型 的 收敛 速度 称 为 非 一 致 攻 的 . 

在 一 致 性 速度 方面 主要 结果 是 Berry-Esseen 定理 

定理 1.27 设 X,,X,,- "相互 独立 ,EX; = 0,EX? = а, = 


1,2,:-, jd Во boi L, = Ў)ЕіХ, |В. X ç, 
i=l 


> 的 意义 同 前 , 则 存在 绝对 常数 PE 
IG, — Ф| < AL... 
. 土 述 定理 的 基础 是 Berry 和 Esseen 的 一 个 重要 不 等 式 , 它 可 
以 用 到 更 广 的 小 围 . 2 
定理 1.28  VEPRELF EBE UT R, ЙС ЛТ ЕЗЕР R, 
f» £ ЗУЖ F ,G 的 Fourier-Sehjes 变换 ( 即 f(u) = |” еа Са) 
等 等 ,又 了 >> 0 国定 ， 则 对 任何 常数 BL (22078 
|F — с < ‚| (D К gen а 


т 
一 7 


十 PT mp [G(x + у) — GGz)|dy, (1.56) 
这 里 сС(Рус>о 只 依赖 于 5。 事实 上 , 它 可 取 为 方程 


C(b)⁄4 2, I 
| пш = + 1 
ө 1⁄2 4 85 


的 根 。 
X14 ВИЕ С 在 RH 处 处 存在 且 sup| G'GD|=c, 


H F( 一 00) = G(—90), 则 对 任何 ë > Qu)" 存在 只 与 5 有关 
的 KG). 


| 29 a 


IF- cl «o А КӘ 00. dt + KO). (1.57) 


以 上 两 个 定理 的 证 明 参 看 [21， ed 
关于 非 一 致 收敛 速度 ,主要 是 Osipov 的 工作 . 
定理 1.29 设 全 1 独立 同 分 布 ,EX, == 0,0 < ЕХ{= 


e! < co, E| Xd? = po < оо, 以 Gs 记 > Xs п o Й, 


则 存在 绝对 常数 4. 
1G,G) — BO 1 < 4pn75(1 + [5 |?) 3, 

与 定理 1.28 相应 ,有 如 下 的 结果 : 

定理 1.30 设 F 在 R! 非 降 ，G 在 R! 上 可 微 且 有 界 变 差 ， 
F(+oo) 一 С(+о), НУЖА 22 有 

| PLEO — 66)1 < =. 

LEEK K, H COSKA + jD 对 一 切 z € RI 以 
fag 分 别 记 F, С Fourier-Stieltjes 变换 ， 则 对 任意 的 x€ R' 和 
T 1.8 


| Fé» — G(<)| < C(s)X1+Í x 0-4 i aer — gC) z 


RIS 
此 处 CG) R5 + Ж, 
oD 一 人 AO — 6602). 
以 上 结果 参看 [21, 第 五 ,六 章 . 0 
GR) 独立 同 分 布 和 的 分 布 的 渐 近 展开 设 Xis Xi» ZZ: vA 
同 分 布 ,EX, = 0,02 = EX: > 0, X f fe SERRE 3, Е|Х,|*< 
c. Ц с.б) 记 标准 化 和 Уух no 的 分 布 函 数 。 依 中 心 极 
. BEH, G,GO 有 极 跟 BCx)。 可 以 说 。BCx) 是 Ga(x) 的 “一 阶 
XH. Ж Berry-Esseen 定理 ， 可 设想 在 剩余 G.G) 一 B(x) di, 


e 30 < 


86) |6 + к, 


主要 部 分 应 有 A(CO/V ^ 的 形状 ,而 剩余 G.G) 一 (OG 十 
ALDI п} 将 有 oa) 的 数量 级 ， 从 这 个 剩余 中 ， 可 设想 分 
离 出 主要 部 分 A/V п 这样 下 去 ,就 得 到 G.G) Bk = 


展开 的 渐 近 表达 式 ， 
形式 上 得 而 这 种 表达 式 ( 常 称 为 Edgeworth 展开 ) 并 不 难 ， 问 
题 在 于 它 在 什么 条 件 下 成 立 。 这 方面 的 严格 处 理 属 于 Osipov, WL 
[21,2 AX. 
定理 1.31 以 »0) id X. 的 特征 函数 、+, 记 其 ?> 阶 半 不 变 
E. фк 一 0'() — e] 28, Н.С) 299 阶 的 Hermite 多 
项 式 , 即 (— e? (е 0) Јах". УРН k> 3,Е|Х,|+< 
о, X. 
lim supe] < 1. ` (1.58) 
则 对 xc Ж! 一 致 地 成 立 
G,(x) 一 Da) + $10, Іт? + oln 79), 
此 处 | 
0, . 
* . 1 / fmt km 
== — ф(х) >， H ys epi) Ше xm) ° 
(1.59) 
Zz* 表 示 求 和 范围 为 K... А, 为 非 负 整 数 , 且 2 mk, =». 
CAO 杂项 ”在 本 段 中 ;我 们 列举 一 些 在 本 书 中 变 用 到 的 分 析 
概率 论 和 分 析 上 的 结果 . 
1. 若干 重要 的 概率 不 等 式 ， 


Minkowski 不 等 式 。 设 也 ，*…*，、X。 为 任意 随机 变量 ,而 + 之 
1,0] 


{EIX b вх, ри DAEL yr, 
f=1 


t 31. • 


Holder 不 等 式 。 设 X, Y 为 任意 随机 变量 : r> l, s> 1, 
r 4 s = р, Д) ! 
Е|ХҮ| < {EXE Y p, 
当 + 一 :一 2 时 ,得 到 重要 的 Cauchy-Schwarz 不 等 式 ， 
Jensen ЖЭ: Хт ВЕТ, ЕХ < оо, Хи 
m Jü PS C, А] 
EQV (Ху) > W(EX). 
一 个 重要 特例 是 ， 对 任何 一 维 变 量 X, 当 r > + 2 1 时 有 
(EIX|ry^ > CEIXVY^, 
以 上 诸 不 等 式 的 证 明 参 看 [1]，p。155 一 156. 
Burkholder-Marcinkiewicz-Zygmund A 3838. Ж{Х, >= 1) 29 
— ЭЕ, о> 1. WEES” 无 关 的 常数 4. Sx 


>x, < 4, {E (х). (1.60) 


ШЕВА 8,13), р. 149—152, 

2. 特征 函数 的 两 个 不 等 式 。 

定理 1.32 ib X,,…',X。 相 互 独立 ,EX; = 0, E| X,l: <oo, 
Xì j= EX}, j= 1, tn, d Bi = a+ o + о, B. 


0, 0 L, = 22E GP] B3» һҺ оту SX B. PEE PR 


j=1 
ЖД || < GL,) 时 ,有 
р) — ехр(—2/2)| < 16L, lel expC— 7/3). 
证 明 见 [2]，P，109， 
定理 1.33 ib 为 一 族 随机 变量 .。 设 存在 常数 a> O K 
b < оо, Ht var(X) >a, E|X s à, HWE Xe. WEE 
20, 8 > 0 使 对 多 中 任 一 变量 的 特征 函数 f; 有 
001 E187， bd < n. 
证 明 殉 [2]，P，11。 
沿用 定理 1.31 的 记号 ,并 记 
› 32 * 


E 


А «—* ы 1 Сы En 
cau E ПЕ урт) 
和 Z* 的 意义 与 (1.59) 式 相同 . 
定理 1.34 在 定理 1.31 的 条 件 (但 去 掉 条 件 (1.58)) 与 记号 


FOJA f, 记 标 准 化 和 Sx To 的 特征 函数 , 即 上 CD = eC] 


ом " ), 则 当 | 
ПЕ М n скараа (в, T Е|Х,|*) 
时 ,有 | 


B dt S TTA 
Har — === (t + Beo y 

= COOg,CH]t + Liana ар 535. 
m= 0, ly k — 1, 

此 处 СО) 为 仅 与 起 有 关 的 常数 . 

证 明 见 [2], 第 六 章 引 理 4, 

3. 几 个 分 析 结 果 . 

定理 1.35 HEN f 在 点 A r ИЙН, АЈ 


4” ГА 1 416) 
ее УПР). 


和 23* 的 意义 与 (1.59) 式 同 . 
证 明 见 [2]。p. 136. 
定理 1.36 设 Gla) 为 一 维 分 布 函数 ,F(xe) AR 上 的 有 界 
ЮЖ. X. | Е'()| =< M < 00 yj reR, H F(—%) = 0, 
F(co) — 1. Ф 
1 
a 1. spl GC) — FUJI, 


А 
NI (G(z + u) — F(z + «))du 


sup 
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| " T 1 Em Š t 
> 2MT8 (з) Eu M =). 
0 


此 即 [81 的 引 理 8。 、 
定理 1.37 GE PC) 在 Lebesgue 意义 下 为 非 奇 异 的 分 布 函 数 ， 
则 对 任何 固定 的 整数 >(1 < v < m) 及 常数 c > 0, 有 


m 


gf exp; >, zx! сај 


t=1 


sup < 1, 


m 


RIES 1895138 7. 
定理 1.38 dk GG) 为 R' ЕЮ REX Ай. б) 为 其 
Fourier-Stieltjes 变换 ,lim GC) = 0, BOX Ж mm 1, 有 


| lelle с оо, RI 6C) ER 上 有 有 界 变 差 , 且 
= ы 


carp e'"dlz"GG)) = mI (0). 


у ж 0 


$ 5х W 
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а-в “回归 系数 最 小 二 乘 
估计 的 入 合 性 


考虑 线性 模型 
Vi 有 em (21) 
这 里 Ү;х; == (хл. “xp > ё= s RAN ё) 以 及 е; 诸 记 号 的 
意义 ,已 在 第 一 章 $ 1.2 中 说 明 过 了 . 我 们 也 将 使 用 在 那里 引进 过 
的 记号 | 
Yo = CYi, Y), 


Ein == Ceist Ens 
X, = (x, bei х.) (2.2) 
S, == Х,Х,, 


在 本 章 中 我 们 常 假定 当 充分 大 时 ,5, 非 异 ,因为 大 样本 性 质 的 问 
题 与 开头 几 个 = 值 无 关 ;, 为 方便 计 我 们 就 候 定 |8p| > 0( 这 时 自然 
IS. > 0 2 2 p)， 因 而 我 们 常 不 加 声明 就 使 用 Sp. ARA 
假定 我 们 提供 一 点 说 明 , 若 无 论 * 多 大 都 有 19,1 = 0, ME S, 的 
” 秩 , 也 就 是 X, 的 秩 rk(X,), 是 的 非 降 函 数 ， 改 必 存 在 r < p, 
使 š 

rk(X,) = r, n 充分 大 ， (23) 
SMit Ас hA RR RITEAR CHAA, k (2.3), 
`á ж 充分 大 时 可 找到 ARETOEN. 其 中 之 一 可 取 为 
Žo RRITA s-o B， 这 时 ,要 估计 的 所 成 为 新 的 回归 系数 
Ж 5 (Ru VE 00 АЗЕ. 293 xig. 由 于 它 可 估 ， 它 
必 可 唯一 地 表 为 诸 羽 的 线性 函数 , 即 | 

xB == SË, i 1,2,6, (2.4) 
这 样 一 来 可 以 把 (2.1 改写 为 Y; — SË е9 i=l, tanye, 
对 这 个 新 寞 型 而 言 ， 有 |$! > 0 当 e> 1， 这 说 明了 ， 候 定 5, 
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非 异 并 无 损 于 间 题 的 茹 裔 性 。 且 我 们 可 以 只 考虑 本 身 而 不 必 涉 
及 其 任意 的 线性 函数 ， 
ШИЕ $1.1 (三) 中 已 给 出 : EDEN” A (z > р) ists 


Ж 2 
(х, YO, £= зуп (2.5) 
的 基础 上 ,可 算出 8 的 LS 估计 为 
Ên = Guo = Sa Xa Yene (2.6) 


在 $1.3 C) ЕП bd ó, 或 其 一 指定 分 是 在 种 种 意义 下 的 相 
合 性 定义 。 本 章 的 目的 就 是 研究 在 种 种 意义 下 ， 相 合 性 的 条 件 ， 
AE. 这 种 条 件 既 与 试验 点 列 {xi} 有 关 、 也 与 随机 误差 序列 
(e) AR. 总 的 说 来 ， 目 前 在 这 个 问题 上 已 得 到 了 相当 深入 的 结 
果 , 但 还 有 一 些 未 解决 的 问题 . 


$21 LS 估计 弱 相 合 的 条 件 


本 节 的 主要 结果 是 定理 2.1。 其 币 指出 了 当 (е) 满足 GM 条 
件 时 ,LS 估计 A 有 避 相 合 性 的 一 个 简洁 的 充 要 条 件 ,我们 也 将 讨 
ib GM 条 件 不 满足 的 清 况 ,在 这 里 结果 还 只 是 初步 的 . 

1963 年 Eicker 在 [1] 中 证 明了 : d$ (e) 满足 GM 条 件 ， 则 
当 “ 
| lim; 一 0 (2.7) 
时 , é 为 8 的 弱 相 合 估计 . 这 是 一 个 显 见 的 结果 ,不 过 , Eicker Ф 
此 提出 了 一 个 有 兴趣 且 迁 为 困难 的 问题 , 即 在 GM 条 件 下 ，(2.7) 
是 不 是 及 弱 相 合 的 必要 条 件 .Eicker 指出 了 一 个 显然 的 情况 , 即 在 
进一步 假定 每 个 ei 都 有 正 态 分 布 时 ,条 件 (2.7) 确 属 必要 . 但 对 于 
一 般 情况 ,他 似 亚 更 倾向 于 认为 ,条 件 (2.7) 是 否 必要 , 可 能 与 {ci} 
的 分 布 有 关 ， 这 问题 经 过 一 些 人 的 努力 ,直到 1976 年 , Drygas 才 
得 出 了 肯定 (2.7) 的 必要 性 的 结论 。 1977 年 ， 陈 希 潘 在 不 知道 
Drygas 工作 的 情况 下 ,独立 地 得 出 了 另外 一 个 证 明 ( 见 [9])， 以 下 
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(二) 中 介绍 的 就 是 这 个 证 明 。 


对 于 处 理 ó, 的 相合 性 问题 ,Anderson 和 Taylor 在 [3] 中 给 出 
的 一 个 引 理 很 有 用 、 为 了 此 处 及 后 文 的 需要 ， 先 将 这 个 引 理 引述 


WF. 


(—) Anderson-Taylor 5808 È T,= rme 


= 1,- ` *,n; 而 将 x; 写 为 


， Ха Yat'tt Fy 
Xs. == „ 
Т, T; Ki T, 


зх) 1 


- (2.8) 


Xir Qin 一 《xi Tei) » = latets P. R) 5, = X; X, БЕ: 


为 = 
S, = | " ) 


K, H, 
其 中 
K, 一 > хат: = (Ом, Ку Qo) Qin» 


H, = YET; == (0,0 is шер. 
Я. 


5138 2.1 (Anderson-Taylor) j n > ;并 记 
| Ха» M p 1, 

йы; = 
xa — KSH.' Ta, ЭҢ pl 1, 


wI | 
Ên = В, + e / > 
H 
У Àj = s Алы + NC + TQHT,). 


ї= 1 i=l 


хп Wu. == bx Всі» Wn 一 Hn T ün- 则 
#=1 


¿= l,- 


(2.93 


л, 


(2.10) 


(2.11) 
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fU. = zi es — T aHa, (5; га) | (2.12) 
且 当 {е} 满足 GM ЖН, 
E(uutw,) = 0, 当 n > í Z p; 
š E(wiw,)-—9, M зі р, 
证 。 依 “四 块 求 道 "公式 (例如 * 见 [25]，p.337* 有 


Sz ( a K, ). 
Ë K, H, 


-( G = ' cei, — К.К.) ) 


(2.13) 


(2.14) 


此 处 用 a 记 $.zh. BODHUA Yo 一 Xp + е 得 
1 


É, = B SS Xhe. (2.15) 
H(2.14), (2.15), 8 


т ха d - я ， 
ba = P= PEEL Р )е. 
(2.16) 
XB 
K.(H, — o 'K,K4)* 
а 


— G — K, HK) Kp, Hn 一 aK, K)” 
(a — Kp H3 Ks) 

LES — a 'H;'K Kp )[Ha (I — a 

(а RE K,H.K,) 


A 


Z кН; 
(а — K,H,K,) ° 
由 (2.16) 得 i; 


ñ. — В, = > Ga > KsHa'Ti)es/ Ca 一 KrHa'K,) 
ieli 
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й 
= G-KHSKS" (2.17) 


再 注意 
Ss — KI TY 


i=l 


> =, = 237 K Hz, + K;,H; Жтт; нук, 
i=] i=l m 


= a — K,HzK,, (2.18) 
以 此 代入 (2.17), 即 得 (2.10)， 我 们 还 注意 ;由 (2.14) 及 (2.18), 可 
得 


520,1) = (31 Ga канте) 


BEI! 


- (> A) е (2.19) 


此 处 S2G,D A Sr 的 Gu) XC. M RERO 
SMEIEQ.12)980](2.13),. EH w, 的 定义 有 
We = Un — fis, 
= (x4 —K.HT.)e, 一 5 (КЫН — Ks H;)Tie; 
i-i 
(2.20) 
注意 到 K, = Kni Tax. H, = Haa + Т„Т», 45 
KlHzl, — КН; = КНЕУ — КУНЕН, Hz, 
— (Ке, 一 K,H,'(H, — T,T2))H.!, 
= (K; — xT; — K; + KH, T,T4)H;, 
== — (xn — K,H;'T,)TiHš' 
= hnn T g Hats 
ЦКА (2.20), 1802.12), 又 


s-i 


Wa = hanen + КН, d Ka Ha’) > Tieis I 
i 
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! 
u = У Cen — KI HTT Jen 
er 


щ z > 12> p 时 有 


cov( wr, и) 


了 
= D>) (za — KIHP'TIYTI (Н, K, — НК.) 
i=l ç 


t Н 
- (Ут; — Ki нг У! Т.Т; Jesi... 一 H; Ka) 
izi 1 


= P(K; — Ki) (ЫК, — HzZ'K,) = 0, 
故 当 n> l> р 时 有 
cov( so, 5401) = cov( Was uj) — COV Was ui) = 0, 
于 是 得 到 (2.13)， 
最 后 , 我 们 注意 到 (2.11) 式 内 与 {x;} 有 关 而 不 涉及 {e;} 之 分 
布 。 这 表明 为 证 (2.11), 不 失 普 遍 性 可 对 {ej 的 分 布 加 上 任意 的 假 
E. 故 设 {oj} 满足 GM 条 件 且 vle) = 1. 这 时 由 (2.13) 有 
var(u,) = vartin) + varl wna) (2.21) 
但 在 {ei 的 所 述 假定 下 有 


" n-i 
varu, ) = > 2, yar btn) = 5 Ads 
É=1 #=1 


"n-1 
var( to) = [1 + bes 2L T Ti HaT.) 
i=l " 


| =>, + THT). 
以 此 三 式 代 人 (2.21) 邓 得 (2.11)。 引 理 证 毕 . 
id S, = 1/$'(1,1), 则 由 .上述 引 理 证 明 过 程 及 其 结论 ,可 得 
以 下 有 用 的 关系 式 


Bin s ё. = Us] Ss, (2.22) 
又 
Sa = Sp + 90 AO H THAT) (2.23) 
p+ 1 
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Hs = up 十 A». 一 T; HZ D Т, а). (2.24) 


(二 》 弱 相合 的 充 要 末 件 (GM WA) 
定理 2.1 设 {ei} 满 足 GM 条 件 , 则 遍 为 8 的 器 相合 估计 的 充 
要 条 件 为 (2.7)， 更 一 般 地 , 对 固定 的 2, 26 8, ЗНАЧА 
充 要 条 件 是 
limsa (1,2) = O, (2.25) 
证 。 充 分 性 很 明显 ; 在 GM ЖЕК, ó, 为 8, 的 无 偏 估计 ， 
| 
varl ы) = o'$, (1, 1), (2.26) 
ЖЖ o2=var(e,), 由 (2.26) 知 ,在 条 件 (2.25) 之 下 有 limvar(6,,)= 


0。 因 而 Ên 为 8, 的 均 方 相合 估计 , 故 更 为 弱 相 合 估计 ， 

必要 性 的 证 明 用 区 证 法 。 为 方便 计 设 1 二 1, 并 记 < 一 
52(1,1)， 设 (2.25) 不 成 立 ， 由 (2.23) 式 ,并 注意 到 T; HaT 
对 任何 Z9 p + 1,30 ev BUS, 非 降 , 故 с, 非 增 ， 因此 存在 c0 
致 cs c， 但 由 (2.14) 和 (2.18), 并 注意 到 Au; 的 定义 ,得 c = 


($y. 因而 知 当 a 一 oo 时 有 


У) вы T 5 < 00, (227) 
由 (2.22) 及 x, 的 定义 ,得 
ё. — B = с, ме, (2.28) 


(2.27), Us n> P, і2 1) 有 界 。 用 对 角 线 方法 可 取出 自 
然 数 子 序列 {i} ,并 存在 常数 序列 {4i} ,使 对 任何 固定 的 i 有 

lim, ; = d; i1-—1;2,:'*. (2.29) 
以 下 设 s> k> р. 由 前 面 所 给 的 T;,H,, K, 等 的 定义 ,根据 最 
小 二 乘法 , 知 对 任何 p 一 1 维 的 向 量 4, 总 有 
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& EK. 
Уа — Tay 2 Ga — Ti HEY. 
在 此 式 中 取 9 = HK, UR | 
k k 

>> >u. ` (2.30) 

i=l iai 
(£2.30) mi » 29 mw 再 令 j— co 然后 4 一 oo, 由 (2.29);(2.30) 
得 " 

dice + dl > сре, 
又 因 3; co, 当 了 充分 大 有 时 有 


k »; à : 
Ув. < Ун, < е 
i=} 


对 任何 固定 的 6% 1 -> co ,由 上 式 得 41 + … 4 CUTE 
(pk. 这 与 с^ {с 结合 ,给 出 
| 0 << Уа == 67 < co, (2.31) 
现 往 证 对 任 给 s > 0, 存 在 自然 数 b fa hot 
3e 当 2 h. ‚ (2.32) 


为 此 注意 
> Эн 一 MA, — 2i | 


f=$+1 isl 


MERAK 致 Уа mc e2 НЬ, В, АКВ 
当 了 之 为 时 有 | х 
Xu > УМ — 5/2, 
TUTTA "Tre 


-42 o 


2j 


b 
ME TI (524 — e/2) 
i=bt1 1 
5 
=( o 一 $a) + в/2< в. 

这 证 明了 (2.32). 现 令 

Дей гы a. j-—1,2,*--, (2.33) 

i=l 

而 往 证 


ы 2 
lin E c — € 2 diei ) = 0, (2.34) 
j>a 1 


这 里 2 аге; 理解 为 均 方 收 全 的 极限 ,这 个 极限 的 存在 性 由 (2.31) 
1 
及 {ej 满足 GM 条 件 推出 ， 为 证 (2.33), 注 意 | 


Е (zı — c Sae) - Б (n 一 де). + Ум 


#j+t 


b aj 5 [2 1 
= E( Cs; Zonen 2; рег 2e uS >> d;e; ) 


1=b+1 


四 5 L4 
e, d < 3E (en; Pen — 23722] 


Punti 
i x E 
+ 3с Уу M + заг $5 а + Yu. 
iebit icti эр1 
取 bos fos gu 
э; 
Зе, > ва < 8/4, уф. 
f=b0+1 
再 选择 b.c 如, 致 
Зоо 9 d) < в[4, 
5 
ХЖ j> j， 致 
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A» dj < ejt, 


m; tA 


最 后 , 取 hon. 808 jh 时 ;有 
ы Br ` 
3E (s, У) hsuei == 22 die; ) 
i-1 


bi [i 
< 600 3 (ын — diy + 60 — eo D hy < 814. 
i=l ^ i21 c 
这 样 ,我 们 证 明了 , 当 Pm j 时 有 


Е |z; — die; І < s, 
(ө —‹ x aj «s 
这 证 明了 (2.34)。 关 为 e 0 H. 
(еа) = о? > a: > 0, 
1. L 


知 c S due, 不 能 以 概率 1 等 于 0, 因而 由 (2.33) 和 (2.34) 推出 ， 


Ên ЖЕ КШК б. 这 证 明了 必要 性， 因而 证 明了 定理 
2.1. 

HAEREERE, @Ш—А1-4Л> кдн A ЖЕКЕМЕ 
Ж: 在 满足 GM 条 件 的 情况 下 ,最 小 二 先知 汗 的 弱 相 合 性 与 其 均 
方 根 合 性 等 价 。 显 然 , 由 此 可 推出 对 任意 的 сє (0,2]， 最 小 二 乘 
估计 的 7 平均 相合 性 彼此 等 价 且 都 与 弱 相 合 竹 等 价 . 又 正如 在 本 
章 开头 部 分 所 指出 的 ,通过 适当 的 参数 变换 , 还 可 以 把 定理 2.1 的 
结论 推广 为 如 下 的 形式 : Ж GM 条件 成 立 ， 则 任 一 可 估 线 性 淫 数 
св Баа. 

(=) 一 般 协 差 阵 的 情况 it 

Eeim = 0, cov(em) = Z,. (2.35) 

当 У, = ol, 时 ,就 得 到 (二 ?中 讨论 过 的 GM 情况 . 在 (2.35) 这 
样 一 般 性 和 的 假定 下 ，LS tiit 6, ЗНАЕ Е, MEE 
没有 解决 。 但 不 难 形式 地 写 出 一 个 充分 条 件 ， 因 为 、 即 使 在 条 件 
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(2.35) 之 下 ,6, 1529 8 WERE. BIT 0,56, RA 
соу($) = S, X,X,X,85; — 0, 34 n— oo, (2.36) 
AR. Z, 完全 已 知 ， 或 更 -一般 地 ，3。 071,, 其 中 2 > 0 ЖА 
Zn 完全 已 知 ， 则 (2.36) 提 供 了 一 个 确定 的 充分 条 件 。 这 个 条 件 是 
否 必 要 , 等 价 于 下 面 的 问题 ， 在 (2.35) 的 一 般 情 况 下 ,及 的 弱 相 
合 性 是 香 仍 等 价 于 其 均 方 相合 性 ? 上 且 前 还 不 知道 这 个 问题 的 解 
*. š 
ЖЖ. У, 未知, 则 条 件 《2.36) 不 仅 无 法 直接 验 证 , 即使 作为 一 
个 对 E 的 一 般 人 性 要 求 ,也 嫌 过 于 复杂 一 些 ， тии 
简单 的 充分 条 件 ( 见 [9]): 
定理 2.2 以 13。》 记 3 的 最 大 特征 根 ; 则 当 


lim (®„)5„'! = 0 (2371 
时 , 色 26 В 的 弱 相 合 估计 . 


ЇЕ. 以 с, Ces dd So Xn Н сас» 255 › № 
Dy = S3 Gi, i1. | 
因此 SLEASA GD 元 ,也 就 是 dues KDT 
于 | 
gn 一 У (x (u, D)e атар 


区 .和 一 】 


= 5; G, i) 2 (3: (и, "T РУР, 


其 中 有 Soy =] 故 由 二 次 型 极 值 的 周知 定理 * 得 知 当 n> 
e 
KP E SPG) max У,у 


= $5!(i, BGI — 0. 
国 此 条 件 (2.36) 成 立 , 这 证 明了 定理 2.2, 


特别 ,如 果 {х;} 满足 条 件 
s; = o(1), | (2.38) 
则 对 x, RER 
A(X,) = о(а) ^0 (2.39) 
而 (2.39) 是 一 个 很 弱 的 条 件 。 这 个 骑 例 之 所 以 值得 注意 ， 是 因为 
一 些 常 匈 的 设计 ,其 至 可 以 说 ,任何 在 实用 上 有 意义 的 设计 都 满足 
(2.38) ,例如 不 难 验 证 (参看 [91), 多 项 式 和 三 角 回归 模型 ,在 试验 
点 列 满足 很 弱 的 条 件 时 ,条 件 (2.38) 成 立 。 又 如 对 Kiefer 提出 的 
所 谓 马 最 优 设 计 , 条 件 (2.38) 也 满足 ( 见 [9])。 在 [9] 中 还 给 出 了 
以 下 较为 一 般 的 充分 条 件 。 

引 理 2.2 设 {z} 是 R 中 的 有 界 点 列 。 若 存在 6 > RIE 


BOR m EIERN kE 
PE > в, | (2.40) 
则 条 件 (2.38) 成 立 。 | 
证 , Ф 
im 


U; = > z Ü i= 1,2,-.... 
ietf 一 DT 


则 Sim = U, + --- 十 Ur。 因为 {xi} 有 界 , 可 找到 常数 5 与 i 无 
ж, ж 20000) Sb, EAA (U 表示 U; 的 最 大 特征 根 ， 事 
mk, 记 M = ЕДЕ pu 

AQU;) = max Uiy < У тах у' (хук; )y 


#=т ШЫ. 


im 
< У) ll < mM 2. (2.41) 
t 


{-1)т+1 


以 (A) 记 非 负 定 方 阵 4 的 最 小 特征 根 ， 用 (2.41) 可 证 : 存在 
与 j 无 关 的 常数 a 0, 使 aU) 22 а, 事实 上 ， 由 (2.40) 及 
(2.41), 

e < |U;| 一世 的 p 个 特征 根 之 积 < а(0)2? 
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— t mmea n € 


[Пп (U; > e/t ac 0, HIR 
k 
BC) = min y бату > У) min yUiy 22 ka, (2.42) 


RR < mja > 0, 由 (2.42) 知 
[S2 6,50 (т), isi m 3. Р, 
对 任何 自然 数 = > т, К, Ат < n < (& + 1)m, DUI 
Sz'G, i) < SC i) < —— 
«IU. 一 1 
由 此 推出 (2.38) 成 立 。 引 理 2.2 ПЕЊЕ, 
现 转向 于 考虑 条 件 (2.39)。 假 定 误差 序列 (a) 在 均 方 意义 下 
有 界 : 
Ee < M < 00, i-1,2,:-:-. (2.43) 
这 时 , 27 e; 两 两 不 相关 , 即 Beiei 一 0 24 i =e j, 则 (2.39) 成 立 。 
进而 可 以 设想 ,如 果 (2.43) 成 立 且 e; 之 间 的 相关 性 受到 一 定 限制 ， 
则 (2.39) 仍 可 能 成 立 。 事 实 上 ,有 | | 
引 理 23 设 条 件 (2.43) 成 立 , 且 
Есер» 0. |i — j| -o, (2.44) 
则 (2.39) 成 立 ， 
如 果 i 是 一 个 时 间 指标 , 则 (2.44) 表 示 , 时 间 相 了 距 很 远 的 两 次 
试验 ,其 结果 的 相关 性 其 微 ,这 是 一 个 合理 的 假定 ， 
引 理 的 证 明 . 记 ai; ™ | Eeiejl, 4 & = CTI * 32.) slizll— 
1。 有 


2 Enz < 2 aj; | z;zjl + > aj] z;zil. 
t-< 


š uto | 
任 给 e> 0, 取 不 充分 大 :使 当 |ë —jl| > k БН mi < 6/2. Mi 
A | 


上 一 让 


D (Ы) <= суя. 
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5 —JH s Hi(2.43) 5d. as = М 对 任何 ij, 放 


€ 
Ў) аң|л;| < M У) Gi + а})/2 < 22M < ya 
Lik 


1 一 有 < 

3p n 充分 大 ， 故 对 充分 大 的 * 有 
A(X,) mid < En, 

H e 的 任意 性 知 (2.39) 成 立 , 引 理 证 毕 . 

当然 ,定理 2.2 以 及 由 之 引出 的 条 件 《2.38) 和 (2.39)、 还 是 一 
个 很 初步 的 结果 ,更 谈 不 上 必要 性 , 但是, 下面 的 例子 《 见 [9]) 说 
8H , 想 要 对 条 件 (2.38) 和 (2.39) 作 实质 性 的 改进 是 不 可 能 的 . 

例 2.1 Н, 为 2" 阶 正 交 方 阵 , 且 C 

IH,G, j)| = 27^, H, Ci 1) > 0, dom 1, tetea D. 
定义 h = 1, жу == 25231, 151,2, 5 ,ffü 


o о 
{ н, 
P, 一 3 
о H, 
m = А + сс + ups : (2.45) 


Wa == (п — 1„(ял—1)7%,-+-,(я— 172, ` 
: A, = diag( W s: ` «Wu. : 
注意 An 为 一 对 角 阵 ,其 主 对 角 线 元 依次 为 al, 0,71). 75 
С Ds, 4—1. (а l) tta G — 1, EX 


Бы = PLASP,. (2.46) 

对 不 能 表 成 (2.45) 形 状 的 整数 т ， 则 任 取 可 表 为 《2.45) 的 m > 
m' ,然后 令 Xu 的 各 元 为 

Х,„(1,3) - EMCHPPTP —1,-::.m'. (2.47) 


通过 (2.46) 和 《2.47), 对 任意 自然 数 六 ,定义 了 协 方差 阵 Zu. Ж, 
条 件 (2.43) 成 立 . Ф р 2.0 
x; = (l1), 1535 xz; (1,—1), 2,56, 
条 件 (2.38) 成 立 ， 又 我 们 假定 e 服从 正 态 分 布 . 

简单 计算 得 出 
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末末 0 
Xn Pp = : . 
ж okoki 0 0 crue 0 
m 一 tu Ў] turi F 
标 过 处 的 元 的 绝对 值 不 超过 P k T 


s + о(1)) olta) ) 
XLXQX, 一 В 
o(11,4) £a + о(1)) 

最 后 ,由 
Sm = т, = „161 + о(1))1һ› 
得 


( +o)  o(1) ) 
SRX EX SQ 一 › 
oQ) 1+об) 


即 (2.36) 不 成 立 ， 因 而 访 不 是 了 的 弱 丁 合 估计 . 


$22 一 般 线 性 弱 相 合 估计 EE 
的 存在 问题 


(—) 问题 提 法 与 主要 结果 ” 仍 沿用 前 面 的 记号 .在 (2.1) 的 
前 ”个 试验 结果 (2.5) 的 基础 上 ， 为 要 估计 8 的 某 一 分 量 ， 或 一 般 
地 估计 8 之 一 线性 水 数 8, 称 形 如 . 


T,— сь + ><, Y; (2.48) 


=l 


的 估计 为 一 线性 估计 ,这 里 cei i= 0,1,5, zs 都 是 已 知 常 数 ， 
LS 估计 是 《2.48) 的 一 种 特例 , 且 总 是 齐 次 的 ( 即 cm 一 0). 

定理 2.1 彻底 解决 了 GM 假定 之 下 ,LS hib É, 的 弱 相 合 性 问 
题 。， 当 条 件 (2.7) 不 成 立时 ,名 既 非 均 方 相合 也 非 弱 相 合 . Е 
首先 考 囊 了 这 样 的 间 题 ， 在 (2.7) 不 成 立 的 情况 下 ， 是 否 可 以 \ 在 
什么 条 件 下 、 能 找到 8 的 均 方 相合 或 弱 相 合 估计 ?提出 这 个 问题 是 
自然 的 : LS 估计 P. 只 有 在 无 偏 性 的 限制 下 才 具 有 基 种 优良 性 
质 ， 如 果 合 弃 无 偏 性 ,能 否 获得 相合 性 方面 的 补偿 ? 事实 上 ,在 企 
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图 改善 LS 佑 计 的 研究 工作 中 提出 了 许多 其 他 估计 ， 其 基本 点 都 
在 于 放弃 无 偏 性 而 希望 估计 的 某 些 其 他 方面 有 所 改善 . 

先 看 两 个 例子 . 

P2.2 设 随机 误差 序列 lei 相互 独立 , 且 e, 的 分 布 为 


Р = зу=1—--›Р(е = mr МТ) 
二 十 (2.49) 


ХЖ p= 1, i—1.2. 5. Се) WE GM 条 件 ,但 


s, 一 D/E Эң п — oo; 因 而 条 件 (2.7) 不 成 立 ,g 的 LS f 
yr TB. 
但 落 取 线性 估计 T, = пу, n= 1,2, RA y. = Ё+ 


cns5 知 T, = 8 H nén, Ж 
PCT, В) = Ple 0) 1—1, 


因而 7。 8. Bl T, 为 8 的 弱 相 合 估计 . 

这 个 浅显 的 例子 也 说 明了 : ARH (e) 施加 一 定 的 条 件 , 则 
当 LS 估计 不 为 弱 相 合 时 ,还 可 能 存在 其 他 相合 的 线性 估计 .本 例 
说 明 : 仅 限制 (e) 的 独立 性 还 不 够 。 但 我 们 在 以 下 将 证 明 : Ж 
{е} 独立 的 前 提 下 ,只 需 加 上 一 显然 的 限制 ,就 足以 排除 上 述 可 能 
性 . 

下 面 一 个 更 为 深刻 的 例子 说 明 : А ВВЕ (е) 满足 GM 条 

件 , 则 即使 进一步 限制 诸 e; 间 分 布 ,也 不 足以 排除 上 述 可 能 性 . 

例 2.3” 先 指出 下 面 的 事实 存在 一 个 常数 项 为 0、 但 系数 不 
全 为 0 的 三 角 级 数 


25 (as cos ix + b, sin nx) (2.50) 
1 


+ 50 ， 


— —L—_.OD—Tc— ————————————————————— 


28 75x 


在 (一 *，z) 上 几乎 处 处 收敛 于 0. 事实 上 ,根据 三 角 级 数论 中 著名 
的 Меншов 定理 ,存在 系数 不 全 为 0 的 三 角 级 数 


co 十 > \(с„созпх + d, sin tix) (2.51) 
д I 


在 (一 * я) JUPE ERAF 0。 在 (2.51) 中 用 2x 代 x*, 得 到 另 一 
Elar, x) 上 几乎 处 处 收 合 于 0 的 三 角 级 数 


"PES > (e, cos2nx + d,sin2nx), (2.52) 
1 
将 (2.51) 与 (2.52) 相 减 ,得 到 三 角 级 数 (2.50), 其 中 
Ози) Corl? Paci 一 dinis 
0 m= [,2,- `. (2.53) 
@ 79 Cin — Саз Ü, = d, — das 


由 (2.53) 不 难 证 明 : 《2.50) 的 系数 不 能 全 为 0。 事实 上 ， 若 a 一 
аз = s = 0, ДШ e = c = су== ++ = 0, 再 由 (2.53) 第 二 行 ， 
A c= ca = +++ — 0, [БП сү со = 5*+ == 0, 同样 ,由 六 一 
b= --- = 0, EI 4, = dym -+- = 0, (2.51) JU SF AE atik Sr 
知 co = 0, 这 与 三 角 级 数 (2.51) 的 各 系数 不 全 为 0 矛盾 。 从 而 证 
明了 具有 所 述 性 质 的 三 角 级 数 (2.50) 的 存在 性 .不 失 普 遍 性 。 设 
a; = bm 0, іа 1, 555, R— 1, 但 а а 0. 又 由 三 角 级 数论 
中 的 Cantor-Lebesgue 定理 ;有 lim бв == lim b, == 0, 


BEIER E, 服从 (一 x，*#) 内 的 均 名 分布， 定义 
ta- == eos (z + — 155, Со “= sin (z + k— 1) 
п == 1,2, <", š 
则 易 见 Ee; — 0, уаг(,;) = 1/2, i=1,2,---, Есер 0 4 
ixj Wk [el 适合 GM 条件 . 又 易 见 {es} 为 同 分 布 序列 。 这 可 
以 通过 直接 计算 e; 的 分 布 得 到 , 也 可 以 证 明 如 下 : 直接 计算 易 知 
e, АМЕ Ее} (为 非 负 整数 ) 与 i 无关, 又 央 e; 有 界 ， 即 知 e 


的 分 布 与 i 无关 ， 
现 令 ?一 1， 并 取 
xz = lfa xx, 0 = 0. (2.54) 
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这 时 有 Y, = fja + e Yi es 122, 由 (2.54) 知 条 件 (2.7) 
ЖЕЙМ» We 的 LS 估计 成 不 为 弱 相 合 .。 现 引 进 线 性 俩 计 T, 如 
下 : | 
T, = сҮ + - + 小 cry， 
其 中 | 
Cm- = aknas Cm > tinis п = 1,2, °. 

Ж Bl, 

T, — B = се, ++ ёё 


nikel 
pA (aj;cosiE + Ё; sini), Mia 为 偶数 时 ， 
#=\ 

(0-1/2k 


2j (acosi£ + b; dni) + apa, 4cos ([n/2] + &)Е, 
iu | Cn 为 奇数 时 ， 
故 由 级 数 (2.50) 几乎 处 处 收敛 于 0 以 及 «0. E] PCT. 
8) == LRI 了 ,为 8 的 强 祖 合 估计 - 
# 21 BAEP 2.2 和 例 2.3 rni (hz PER ESMS 
的 ,但 它们 都 非 均 方 相合。 事实 上 ,对 例 2.2 有 ЕСТ, — 8): 一 v, 


6 МаК 1 
而 对 例 2.3 则 有 Е(Т, — 8 glite + 8) 6 (а 
x 


c) 0, 这 说 上 明 : 昌 则 在 GM 条 件 下 LS 估计 的 器 相合 性 与 
均 方 相合 性 等 价 , 但 这 个 事实 对 一 般 的 线性 估计 并 不 成 立 。 其 实 ， 
以 下 我 们 将 证 明 ( 见 定理 2.3): 在 GM AE ET. # LS 估计 不 为 弱 
相合 , 则 不 可 能 存在 均 方 相合 的 线性 估计 . 

上 述 类 型 例子 的 存在 促使 我 们 考虑 这 样 的 问题 ， 需 要 对 {a} 
加 上 什么 条 件 ,才能 保证 当 LS 知 计 不 为 弱 相 合 时 ， 别 无 其 他 弱 相 
合 的 线性 估计 存在 . 由 例 2.2 看 由， 这 个 问题 在 GM 假定 的 范围 
内 难于 作出 富有 成 果 的 发 展 , 因此 我 们 的 研究 是 在 假定 Le) 为 独 
立 序列 的 前 提 下 进行 .这 个 问题 , 陈 希 到 首 先 在 [9] 中 借助 于 线性 
估计 的 容许 性 理论 ; 证 明了 如 下 的 初步 结果 : 若 Le) 独立 同 分 布 
Не ~ (0, 7), 则 当 (2.7) 不 成 立时 , 8 的 弱 相 合 线 狂 估计 不 可 能 
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存在 .后 来 ,他 在 [111 中 得 到 了 比较 彻底 的 结果 ,表述 为 下 面 的 两 
个 定理 : 

定理 2.3 tie 满足 GM 条件, 则 当 (2.7) 不 成 立时 ,6 的 线 
性 均 方 相合 合计 不 可 能 存在 . 更 一 般 地 ， 若 8 的 某 一 指定 分 量 的 
LS 估计 不 为 均 方 相合 ， 则 该 分 量 的 线性 均 方 相合 估计 不 可 能 存 
fr. 

538 2.4 VE le, 相互 独立 , Ee; = 0, var(e; —g.i-l, 
2,5-5,0 0 < оо, Xj Le] 满足 下 述 条 件 : 

(A) 在 {е;} 中 不 存在 渐 近 退化 的 子 序 列 . MAZ, 不 在 在 常 
Жа 及 自然 数 子 序列 {na} 50 

ea, Ñ k— oo. (2.55) 

则 当 8 8955 TEE $y EL BJ LS 估计 不 为 弱 相 合 时 ， 该 分 量 的 线性 
弱 相 合 估 计 不 可 能 存在 . ‚ 

BLZ ETE CA) 不 满足 , 则 可 找到 试验 点 列 {а}, ndr ES TR 
СВ, Ü ¿8 的 LS. 估计 不 为 器 相合 ， 但 存在 其 他 的 线性 弱 相 合 估 
计 . 

fi 2.2 中 的 {ei} SEPA IR EE AR FF CAD. 

(=) 引 理 

我 们 先 证 明 一 个 引 理 , 它 构成 定理 2.4 的 证 明 的 主要 部 分 

引 理 2.4 ik (e: 为 相互 独立 的 殖 机 变量 序列 ， 满足 下 面 的 
条 件 (A): 

(АКЕНОВ {or} 及 自然 数 子 序列 (о), 使 当 k — co 
时 有 e 一 ax 50. 

又 设 си» `" 5 Cnn 4 bas n=l, 2 ER LY f 7E 


出 当 ”一 co 时 有 


和 证。 作 随 机 变量 cy， e*,.….， 使 

1° e» ет» ein еў, 相互 独立 。 

2° 对 每 个 i, e; t3 ef 同 分 布 . 
这 种 序列 {ef} 的 存在 ， 可 以 在 必要 时 通过 扩大 原 有 的 概率 空间 来 
实现 . 记 &j— s — f.i —1,2.:-. WRAN. 2, 就 是 Й 
对 称 化 ( 见 [28], 第 五 章 )， 启 (2.56) 知 , 当 n — co 时 有 


яп 
3 P 
А Усне — ó, 0, 
i= 


TEH s— о 时 有 


As, — ай — eub; 0. ZEN (258) 
i-i 
现 往 证 存在 m > 0,91 
P(le| ZZ m) 22 т, i = 1,2, -- °, (2.59) 


事实 上 , 若 这 样 的 "不 存在 。 则 可 找到 自然 数 子 序列 (m). fiui 
k— oo WEB En > 0, DL 记 ci 的 中 位 数 , 则 因 对 任 给 s > 0, 当 
&-> оо 时 有 PCIE, ®е)-—>0, 而 
P| Enl Z в) = P(e,, — ез, 2 в) + PC, — AS =< —в) 
22 Pleng — Bag 22 Es 65, — pa, < 0) 
+ Pleng — Hap E. ея, — Hap 2 0) 


之 ju. 7 Bag 22 = s) + Pleng 一 Hng =< —є)} 


一 PCen 一 А» | 2 в). 
因而 imP(| еар 一 pot 2 6) = 0, 对 任 给 620. XX (2 Bl 
足 条 件 (А) 矛盾 ， 


我 们 先 在 下 述 补 充 假定 (В) 之 下 来 证 明 本 引 理 的 结论 : 
(B) FE M «oo f P(|Z; | M) = 0, ;—1, 2,:--, (2.60) 
由 条 件 (B) 得 EZ — 0, i 一 1,2---,. XH(2.59) 812.600 E 
Eg > т, E| P M,i-l2,:4 (2.61) 
VÀ f; id e; НЧ) ШЕРА» ИНД (2.61) 8 
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С) mt Mi ¿= 1,2, `+. 
收 存 在 与 EKER 9 0 480020, 使 
EOI < 1 — j, 33 | i0 1,2, 5, (2.62) 
显然 可 要 求 ow < 1, 
现 设 (2.57) 不 成 立 。 ba s 470, 及 自然 数 子 序 
列 (m). 使 d, > 4, k— 1,2, 0 & сыта соз i= 
lst nao WA 
3 eh m 1. (2.63) 


isl 


由 (2.58) 及 di, 25 4 > 0， 知 当 &— оо 时 有 


Wg == > ck ë; 2. 0. (2.64) 
izi 
W 的 特征 函数 为 
эд 
plt) == П (скі). (2.65) 
#=1 


由 于 1:1 < 1, 由 (2.62) 有 

[Ceu] < 1 — бс, эң [el < p, == l, n]. (2.66) 
ЕН(2.65), (2.66), 8! «1, UL log(1 — z) < mr 34 0 < z< 
LÄ 


к = Š log lfet) 


9k 
= —ë# > сї = — 812—0), 
i-1 


这 与 (2.64) 了 矛盾 。 因 而 在 补充 条 件 (B) 之 下 证 明了 《2.577。 

现 取 消 补充 假定 (B)。 仍 用 反 证 法 : Ж (257) 式 不 对 : ЖИЛ 
如 前 ,有 4, {ак}, Ф224, сы, БАЖ(2.63)ЯП (2.64). ЗЕ: 
三 角 序 列 

lentis "'°› р k= 1,2, +. 


适合 [28] 中 所 谓 的 wan RERI], p. 302). BKE, 若 以 fu 
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dà cui; 的 特征 还 数 , ПЕЧ 2 对称, 有 fel 2 0, X Q2.64) 5 
im T] 0 一 1， 对 任何 £€(—00,00). 
TEM k— oo 时 有 
„пах 11 —f4Ol < Lom I flu) 0. 


这 证 明了 上 述 断言 ( 见 [28], p. 302—303), 358 (2.64) 结合 ,用 
[28], p.317 上 的 结果 , 并 注意 到 名 的 对 称 性 ， 知 对 任 给 e> 0 
有 


як 
im >] FG) — 0, (2.67) 
kx i-i 1х1>® 
imo | ағы) 一 0， (2.68) 
дзе Т 2 1е1<6 


ЖАКЕН 为 cue: УТА. ER M > m, rpm ESL, 
(2.59) ,并 定义 I 
M, 当 2,22 м, 
2; = z, щщ |#] < M, i=1,2, -**, 
| —M, щаёа<-м, 
HJ {二} 是 一 个 相互 独立 的 对 称 随机 变量 序列 ,满足 条 件 
P(|Z| >т) zm, Р(|ё] 2 М) = 0, і = 1, 2, --*, 


(2.69) 
又 车 以 £u; 记 en; 的 分 布 函数 , 则 对 任 给 є > 0 有 
Joss Ca) = € dF (z); 
jos ribu) < = хаР (ж) + міў a, dF (х). 


由 此 及 (2.63),(2.67) 和 (2.68) 知 ,车 在 (2.67) 和 (2.68) 中 把 Fi XR p 

Ёк ,该 两 式 仍 保持 成 立 ， 再 利用 [281, p.317 的 3°, 即 得 当 k—co 
эа, (2.70) 
i£ 


次 为 (2,1 注 足 (2.69)。 由 前 半 毁 已 证 部 分 ,从 (2.70) 推 出 


lim ES = {), 


这 与 (2.63) 矛 盾 , 因 而 完成 了 本 引 理 的 证 明 . 

(ж) 定理 2.3 的 证 明 ”为 确定 计 , 取 8 的 分 量 名 来 讨论 ， 先 
往 证 在 {е;} 满足 GM 条 件 时 , 形 如 (2.48) ЈАЧА Т, 为 B, BS 
均 方 相合 估计 的 充 要 条 件 , 是 以 下 四 个 关系 式 邮 时 成 立 : 


lim o = 0, (2.71) 
im Саба = l, (2.72) 
in сых == 0, 192,75. Ф, (2.73) , 
im > cà; == 0, š (2.74) 


"m 


事实 上 , 若 T, 均 方 相合 sH] lim ECT, P: ё) = 0, {H 
Ta — fi = Em 十 (3 Cait 一 1) 
+ У) > cez; B; + 2: €y;€i 


j=2 i=1 


再 由 {ei} 满足 GM 条 件 知 
ECT, — B.) 


I { zie +( Y — 1) в + У) 2; consid 


i=l j=? ¿= 
+ г (2.75) 
#=1 S 
由 Em ECT, — p) = 0 $12.75),5118 (2.74), B. 
lim] Eno + {5 Сыа == 1), + > So ohh } — 0 (2.76) 
n isi | ivi fei 
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RENE 1, "76, б, 部 成 立 , 由 此 得 到 《2.71 和 六-(2.73)。 反 过 来 :由 
(2.71) 一 (2.73) 推 出 (2.76), 再 与 (2.74) 结 合 , FER Q2.75)/9 1. Т, 
为 如 的 均 方 相合 估计 ， 这 证 明了 上 述 断 言 . 
现 引进 向 量 : 

Qi == (mis `... кр)!» j == lew p. (2.77) 
根据 在 本 章 开 始 处 所 作 的 关于 S, 非 异 (n Z p) 的 假定 , 类 x > p 
时 ，(2.77) 中 的 ?个 向 量 线性 无 关 ， UL a. Yd Ou. rto On 张 成 
的 线性 子 空间 , з, 记 Qus 在 z, 上 的 投影 .7 可 唯一 地 表 为 

No == dis Qa. Fco + dps Opa, n> p. (2.78) 
， 现 让 我 们 假设 8, 的 LS 估计 房 。 不 为 均 方 相合 , 则 存在 常数 0770, 
使 当 = — co 时 


var(ñ,,) 1 v. (2.79) 
dd var(e,) = 8, En == Qu 一 Ho， 有 
varln) = of Mz. M. (2.80) 
XTRA REER E (2.80) 的 验证 放 到 后 商 ， 现 由 (2.797， 
《2.80), 知 存在 常数 R < оо, 
ЇЇ < 2, a= p.p + 1, 5, (2.81) 


现 往 证 ;存在 常数 K < o, 

[din SK, щі 1,505, n=b,b-- 1, (2.82) 
事实 上 ,着 满足 (2.82) 的 KK 不 存在 , 则 为 确定 计 且 不 失 普 遍 姓 、 可 
找到 自然 数 子 序列 Un.) ,使 


lim | das, | зр со. (2.83) 
在 (2.78) 中 , 改 n 为 n JE fir ug dind din,» 有 
А ; 
ч m dan, Qn, T У.о). (2.84) 
i-3 


M nzp „Ом, "tt? о, 线性 无 关 , 故 存在 自然 数 d, t= 
# 
uA Om, + > ua 960, Щщ + > a. (2.85) 
i-3 


е 00, Æ Qoo Grog 所 张 成 的 线性 子 空 间 上 的 投影 ， 而 


$358 ç 


令 5 一 0 一 cc MU 5 >< 0, X] rZed, D. b, i z, ROB na 4 У 
量 构成 的 列 向 量 . Н л 与 8 的 定义 有 

2,1 > dell, 3 +> 4. | (2.86) 
以 g, id n, 的 前 n; 个 分 量 所 构成 的 列 向 量 ， 册 (2.81) 及 (2.83) 一 
《2.86), 得 


R > 6, = lOe, тз з», => О, 一 н. 
22 la © PA == КАА! р; | О 
> (4, | tell F [0..2] — e, Mi у — oo, 


这 个 矛盾 证 本 了 满足 (2.82) 的 常数 才 的 存在 性 
Mit g, 具有 某 一 个 形 如 《2.48) 的 线性 均 方 相合 估计 Tas W 
《2.71) 一 (2.74) 成 立 。 XB {dins 7 == 2; "ee, Р, n = PAR 
可 用 一 djn 乘 (2.73) 并 与 (2.72) 相 加 ,得 
1 = lim > Eni (sa X > diz) = lim сё», (2.87) 


п- 0 
i- 


此 处 ch = (сыз т" оса). 但 是 ,由 (2.74) 和 (2.81), 有 
Ceka Y < 1,6,2 < |1,12 — 0, 
这 与 (2.87) 矛盾 ， 因 而 证 明了 定理 。 但 尚 须 验 证 《2.80) 6. 有 
чаг(ы) = 052 (1,1). 记 B — (Qu 1 О0),Ж S, BA 
Oil? 01.8 
Aem ( B'Q, B'B ). 
р A SUR 
$2 (1,1) = Co, Qi, BCB'B)"B'Q,,)^* 

= l9, — B(B'B)'F'O,l7 

= ||Q,, 一 ql? == |6,1? (2.88) 
因而 证 明了 (2.80)， 在 (2.88) 的 推导 中 ,我 们 用 了 下 述 熟 知 的 事实 
CE £25], p. 48): 以 € (B) 记 由 8 的 各 列 向 量 张 成 的 线性 子 
空间 , 则 B(B'B)"B 为 向 - (B) 的 投影 变换 矩阵 ( 若 | В'В| = 
0, 则 只 须 使 用 B'B 的 任 一 广义 北 (B'B)- 去 代替 《BB) 7), 
(四 ) 定理 2.4 的 证 明 ”定理 2.4 的 证 明基 于 引 理 2.4 及 定理 
23. 先 往 证 ， 若 (e) 满足 定理 2.4 的 条 件 , 则 它 也 满足 引 理 2.4 
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mags dr CAD. 用 反 证 法 . 设 CAD) 不 满足 , 则 存在 常数 序列 Lak) 
及 自然 数 子 序列 {л}, Ж | 

en — ar 50, 当 大 一 oo 《2.89) 
易 见 {о} 有 界 ， 因 车 不 然 ,必要 时 抽出 子 序列 ,可 设 fim ot = co 


《或 一 oo ,证 明 一 样 )， 由 (2.89) 知 
| limPC es, Za, — 1) = 1. (2.90) 


但 是 ,由 Ег = 0, Ecl = = < co, XH 
PCIe a] 2 а, — 1) < at (ay — 11 790, ЭҢ £-> co, 

这 上 与 (2.90) 矛 盾 ,因而 证 明了 {a4} 的 有 田 性 .必要 时 取出 子 序列 ， 

不 失 普遍 性 可 设 по, о, a 有限， 这 与 (2.89) 结 合 将 给 出 : 当 


k— oo 时 有 ел, > а, 5 (e) 满足 条 件 (A) 矛 盾 ， 这 证 明了 {ec} 
必 满 足 条 件 (А'), 

Ji 0, RU LS 估计 ñ, KARAHA, 但 基 个 形 如 (2.48) 的 T, 
却 是 2, 的 弱 相 合 估计 , 则 有 


т Р т 
T,— P, = (> Сыа — 1 ) в. + У 2 у сохаву 
FETI j=? i=l 


十 ( = + 之 2 ene yn 4, 对 任意 的 ё.» 1*5 Be. 
由 此 知 (2.72) 和 (C2.73) 成 立 , 且 当 n9 co 时 ` 
emt Ў оме 50, (э) 


根据 本 定理 的 假定 ,及 上 文 证 明 的 {е;} 满足 条 件 СА”), A8] RB 2.4 
的 一 切 条 性 满足 ,因而 由 该 引 理 知 (2.74) 成 立 。 故 


lim E (> eve) 一 lim S^ clo!-0, 
#=1 


2c ве +Z? 


这 推出 > cuei 70, 3 n — оо, H:55(2.91)48 AA (2.71) 式 也 
М. 现在 我 们 证 明了 (2.71) 一 (2.74) 全 部 成 立 。 故 由 定理 2.3 
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证 骨 的 开始 部 分 ， 知 Т„ 为 8 的 均 方 入 合 估计 .但 根据 定理 2.3， 
RHEE n AA 的 均 方 相合 佰 计 ( 因 而 更 为 弱 相 合 佑 计 ) 时 才 5 
可 能 .这 个 矛盾 证 明了 定理 2.4 B) BE SIS. 

Mig {e} 不 满足 条 件 这 时 存在 自然 数 子 序列 2E 
常数 a, Ib А — оо 时 ce 记 2 Ër = en – а. RART 
序列 i4). fi 

PCI, | 2 1/0) « 1/5, 01,2, 6-5, (2.92) 
取 p= 1 RARAJ {x} WF: 
д M =n j= 1,2,-.., 
| 0, Жїз, 
对 此 条 件 (2.7) 不 满足 ， 故 的 LS (YT B. 不 是 8 的 弱 相 合 估计 . 
现 定 义 8 的 线性 估计 (2.48) 如 下 :固定 *。 找 出 最 大 的 自然 数 7， 
满足 条 件 ny < ”然后 令 
js Hin, 
0, 4 1=<;=< x, 但 i < nay. 
这 时 易 见 了, 84:64, Difud(292)8 
P(|T, — 8| > 1/i) © 1/1. (2.93) 
因为 当 ”一 co 时 显然 有 f— оо, kh (2.93) AL T, 为 8 的 弱 相 
合 估计 。 这 证 明了 本 定理 的 后 半 ,因而 完成 了 定理 的 证 明 . 


©» = fa; e = Í 


(X) 补充 说 明 ”这 里 我 们 就 че кнн ЫН LAF- 


项 作 些 说 明 . 

首先 ,定理 2.1 明确 了 :在 {ei} СМ 条 件 时 ,LS 伍 计 的 弱 
相合 性 与 均 方 相 合 性 等 价 . 对 一 般 线性 估计 而 言 ， 我 们 在 注 2.1 
中 已 指出 ,这 个 等 价 性 不 再 成 立 ， 但 是 ,如 果 {e;} 满足 定理 2.4 的 
条 件 ， 则 对 一 般 绥 性 估计 这 个 等 价 性 仍 成 立 。 这 从 一 个 角度 对 定 
ZR 2.4 的 意义 作 了 补充 。 

其 次 , 设 (e) 满足 定理 2.4 的 条 件 ， 且 中 的 LS {К} Aa 2588 
相合 。 这 时 ,车 某 一 线性 估计 (2.48) 也 是 8, 的 弱 相 合 估 计 , 则 如 上 
述 , 这 估计 T, 也 是 中 的 均 方 相合 估计 。 有 


» ól » 


varl Ta) = = У) ek. (2.94) 


183: (2.80), (2.87 f 2.91) SHERE B, KIT e E SRI S. 
lim inf[var(T,)/ ECB, — 8Y] 2 1. 
因此 有 
lim infE(T, — AVE a — 8 2 1, (2.95) 


(2.95 A HT RERE2O: ЖОРУЛАТ £ 的 一 切 弱 相合 估计 的 类 
th, A RS LS 估计 所 ,具有 “一 臻 最 小 的 渐 近 风险 ”由 此 易 知 , 不 
可 能 存在 这 样 的 线性 信 计 T, (不 论 其 是 否 弱 相合 ), 使 

lim infE(T, — #,)°/ЕС„ — В) «1 


X— 8-—.--:.85) WRA BRSSSbI—T?1(BAX 
XL. 这 个 事实 可 以 简单 地 表述 为 : 在 平方 损失 下 《以 及 假定 {e} 
满足 定理 2.4 的 条 件 ), LS 估计 具有 “ 渐 近 可 容许 性”. 关于 在 平 
- 方 损失 下 ，LS 估计 在 全 部 线性 估计 类 中 的 可 容许 性 疝 题 , 有 许多 
学 者 研究 过 (参看 本 忆 第 四 意 }.。 其 中 一 个 浅显 的 事实 是 ， 当 样本 
大 小 п 固定 时 ,LS 估计 在 全 体 线性 估计 类 中 是 可 容许 的 。 上 文 指 
出 的 LS 舍 计 的 渐 近 可 容许 和 福 , 从 大 样本 理论 的 角度 补充 了 这 个 结 
论 .至 于 在 定理 2.4 的 假定 不 成 立时 ,上 述 渐 近 可 容许 的 性 质 是 否 
仍 能 保持 ,现在 还 不 清楚 . 


$23 15 估计 的 + 阶 平均 相合 性 


当 随机 误差 ers ec， … 的 二 阶 算 不 存在 时 * 前 两 节 的 理论 不 
能 用 . 但 这 时 仍 可 计算 8 的 LS 估计 并 讨论 其 柜 合 性 问题 。 事实 
L, LS 估计 可 看 作 是 通常 的 样本 均值 的 推广 , 而 关于 后 者 的 相合 
性 即 大 数 定律 ,其 最 深刻 的 结果 都 只 假定 一 阶 矩 存在 . 

本 节 我 们 假定 e; 的 7 阶 矩 有 限 ,r>k(0, 2), 而 讨论 后 的 7+ 阶 
平均 相合 性 问题 . 关于 强 相 合 狂 的 问题 到 $ 2.4 再 讲 。 其 所 以 没 
有 专门 讨论 弱 相 合 性 ， 是 因为 至 今 尚未 得 到 导致 弱 相 合 性 而 不 导 
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致 > rE yo kash R. CAT. ХЕКЕ ЖОХАН kk 35 
价 , 见 以 下 例 2.6). 记 的 + 阶 平均 相合 性 问题 ,由 本 书 作 者 在 文献 
12] 和 [14] 中 讨论 过 . 白 志 东 在 {427] 中 改善 了 他 们 的 结 昌 并 简化 
了 证 明 . 

(一 ) > 阶 平均 相合 性 的 充分 条 件 ”为 清楚 计 将 所 有 结果 分 
述 为 几 个 定理 . 又 为 避免 重复 ,以 下 总 假定 在 一 般 线性 模型 (2.1) 
Б, 随机 ,误差 €s fas "^" HAAA. X r€ (9, 2) 为 一 给 定 的 
Жж. | 

定理 25 以 F; 记 ;的 分 布 ,并 令 

ale) = mx | ||). 
їє єп }|х|:эжс 
i eil") 一致 可 积 , 即 
lir | sup a, (e) | = 0 . (296) 


且 当 + 空 1 时, 渤 一 步 假 定 Ee = Ee=**" = 0,34 aral 
时 ， 假 定 每 个 。 的 分 布 关 于 0 对 称 ， 则 当 试 验 点 列 ix) WER 
件 
$53! = O(n* 97) — ` (2.97) 
时 ,对 任意 指定 的 a> 1 有 
E 8. = eli = Ofn™ 1)2—7)/2a + (a, (n ууЛү, | (2.98) 


定理 2.6 FEHB М, 


Eje M, i=],2, 1° (2.99) 
BÀ rad HB. 还 假定 Ee, = Ее, = o 一 0， 则 当 条 件 
Sa! o(n* 07) (2.100) 
时 ,有 
lim E |É, — #|' ~ 0. (2101) 


显然 ,由 条 件 (2.96) 推 出 条 件 《2.99)}， 即 定理 2.6 中 关于 (ei) 
的 条 件 有 所 减轻 ， 但 以 加 强 (x 的 条 件 为 代价 。 以 后 将 举例 说 
Hj. 定理 2.5 中 的 条 件 (2.96) 不 能 用 条 件 (2.99) 来 代替 ， 
为 证 明定 埋 , 诡 要 以 下 的 引 理 ; 
63, 


引 理 2.5 Wb ettiren 独立 ,Bel 一 … :一 Eco 一 0。 则 当 
I < r < mW 


|$. «23, Eel. (2.102) 
又 着 0 <, ec IGXBUREDR Enos Ee, 0), NU 
eil Z5 EG (2.103) 


ПЕ, 引 理 的 后 半 是 一 局 知 的 事实 ( 见 [28]、p. 155), FEE, 
H [la + 217 jal + |Р|' RIE. SIERE Chatterji 在 
1969 年 得 到 《 见 [29])， 它 依赖 于 下 述 不 等 式 ; 对 1 < + < 2 # 
任何 实数 总 有 

| LHir apa, (2.104) 
证 明 如 下 : 先 设 r9 1. DS G+ iy Sar TRT 1< 
rs250:2 10,0 1-+г;>1-+є1=2;> 2", X 21 < 2r, 
故 (2.104) 成 立 . Ж 0о<;<1,Щ ((1 + 0)" = zGr Аа 
cT %= 2, 依 带 余 项 的 Taylor 公式 有 (1 +y mdp + r: + 
Ë < 1 十 rf 十 21. 这 证 明了 (2.104) 当 1 之 0 的 情况 时 成 立 ,1 < 0 
的 情况 类 似 证 明 . 

在 (2.104) 中 以 z = eife 代入 ,得 

let el* < 2[е,|' + rela l sign(e,) + leal". 
注意 当 eas e; 中 有 一 个 或 同时 为 0 时 ,上 式 也 成 立 ， 由 此 式 ， 利 用 
£i, 52 之 独立 性 及 Ee, = 0,3788 

Ele + al & 2Е|є,|' + Ele: 

于 是 用 妇 纳 法 得 到 (2.102), 引 理 证 毕 . 
现 转 到 定理 2.5 的 证 明 . 设 1 < + < 2, Ф 
fe» M le < n, 


€wi T рх 
0, эщ EHI >n”, 
(Yay = e; — lnis Gaj = e, — Etuis 
- - = 
ё = e; — £4; Eri — Eë,;s 


¿= 1; “He 
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则 有 
Её, Ed, = 0, icd, un. (2.1055 
HER 6, 的 一 分 最 ,例如 [o 来 讨论 . 有 


— В, = x аме» 
其 中 (利用 (2.97)) 
Ул аз = 5у(1,1) = 009990), 
因为 lera i 
X 本 A "(722 lal) p^ 
i 


« "|; 2; а2, ү" = O(1). (2.106) 


i-1 


现 有 


| Sanie: й = чё. (2.107) 
由 于 而， ôn 独立 ,并 有 (2.105), 故 可 用 引 理 2.5。 于 是 有 
K> ea < 25 laa; [E |n| (2.108) 
i=l i-1 


f " 
T2 


注意 到 
flail" = |En; 2 E£,;|' < 2(2,;[" + 2| Ez, V. 
由 (2.108), 并 注意 |52,1" < El Enl < а, (пи), 
z| аһ ; <s lani PElz, l 
iei isl 
< 8-0(1):a, (nir) == О(о„ (07). — (2.109) 
Ф 


z| > | = {к (> aub) ү 


iz 
= r/2 „2 
= (Јева) < (DoEes) . (2.110) 
izi 


. 65 = 


{НҢ (2.968 (Ele i-1,2,--*] AF. 故 


Eeh = Í - ú x'dF;(x) 


4,00) + Í dE) 


к Jos Inteleg 
= n" "E | е; |7 + nO a, (n), 
以 此 代入 (2.110), 得 
>, аыбы ' 
i=} 
a Oin-«-00-n0/« 小 (a, (nV) y^). (2.1 11) 
注意 到 当 &— co 时, arlan) < а, (пч) 0, B. 0 =< r/2«1, 
由 (2.1087:(2.109) 和 (2.11 D, BIA 
E |ó. — fi | 一 Е |>, 2 
(0 O(n € Dü-ry (gn) YY 
这 证 明了 (2.98). | | 
如 果 0 < + < 1, н < es; бүгү fai» 利用 引 理 2.5 的 


后 半 : 按 上 述 证 法 仍 得 (2.111)， 这 证 明了 定理 2.5. 
定理 2.6 的 证 明 直 接 用 引 理 2.5 后 半 ， 以 及 由 条 件 (2.100) 36 


出 的 Dylans l” = о(1) 得 出 : 


Е 


E| Ên = 5\|' = E | >a, a| 
iel 


< S Elejl'|asl* < M D anl" == o(1). 
i-1 #=1 - ` 


注 2.2 #E[121 HER, # l&r < 2, а, е 独立 ， 
Ec, = Een = -:- = 0, 且 存 在 随机 变量 e, 使 Pel Z |a) 2 
P(|e;| 2 а) 对 任何 a > 0, m Е|е|' < co， 则 当 条 件 (2.97) 成 
立时 ,有 (2.1012?，、 这 个 结果 显然 是 定理 2.5 的 推 沦 。 在 [14] 中 ,对 
于 0 < 之 + 之 1, 在 与 定理 2.5 同样 的 条 件 下 证 明了 (2.98)， 但 对 于 


1 < r < 2, 则 还 要 求 


ERU /Pde > =} 
= of sp, РС >a) } (тиз) 


才能 证 得 (2.101)。 定理 2.5 是 对 [14] 中 的 结果 的 实质 福 的 改进 . 
因为 存在 这 样 的 {ei} ,满足 定理 2.5 的 条 件 , 但 不 满足 (2.112)《 例 
1177). 

(>) 若干 补充 说 明 ”这 一 段 的 目的 是 通过 几 个 例子 ,从 车 干 
角度 对 上 一 毁 的 定理 作 些 补充 。 

1. 条 件 的 必要 性 问题 ”更 确定 一 些 ， 问 题 可 以 提出 如 下 : 设 
{ci} 满足 定理 2.5 或 定理 2.6 А. А: ЮТ ó, 为 8 的 > 阶 平均 
相合 估计 , 关于 (e) 的 条 件 是 否 必 要 的 ? 这 个 问题 可 以 给 予 一 彻 
底 的 否定 回答 , 即 : 在 任何 情况 下 都 不 是 必要 的 ， 

例如 ,以 定理 25 的 1<r<2 的 情况 来 说 , 设 - cy 6-48 
互 独立 (分 布依 次 为 Fo F,,"…*), 均 信和 都 为 0, 日 当 < 一 co 时 


ae) = sw| _ |#F2F) >0, 
cE 
а, = ala”), 
Mima, = 0, BRRR {en} 0< ¿, t оо, 但 
lim с„оһ = 0, (2.113) 
lim cpn = 0, (2414) 
取 试 验 点 列 (х,а 
-Xx4 = nnt] c. 


则 条 件 (2.97) 不 满足 ， 但 采用 定理 2.5 证 明 中 的 论证 ,同样 得 到 
E 8, ES 8l 
— О{ с?п -Q-ny* 十 Cenan) 
于 是 根据 (2.113),《2.114), 知 lim E |6, — #|' = 0, 


» 67+ 


因此 我 们 可 以 提出 问题 , 比方 说 ， 为 了 对 一 切 满足 条 件 “e， 
ei “独立 同 分 布 ，Ecl = 0, E | ai" < co"(1 < r < 2) 的 {e}， 
都 有 (2.101) 式 ，{xi:} 应 满足 的 充 要 条 件 是 什么 ? 由 定理 25, А 
《2.97) 是 充分 条 件 ,但 这 个 条 件 是 否 必 要 《注意 ， 此 处 所 提 的 必要 
性 与 上 面 所 论 问题 的 差别 ， 上 面 讨论 的 问题 是 : 条 件 (2.97) 是 否 
对 任何 特定 的 (e) 都 必要 。 这 问题 已 作 了 和 否定 的 回答 )， 就 不 易 
回答 了 ， 另 一 方面 ， 也 可 以 证 了 明 : 条件 (2.97) 并 不 能 作 任 何 实质 
的 改进 ， 事 实 上 ,如 下 例 显示 的 ,条 件 

Sz! = Oln logn) i), —HTUJ s > 0 (2.115) 

也 并 非 充分 的 . 

例 2.5 Жа, е, Rar ese 的 分 布 为 

P(e, = i) = celil 797 (юв |21) Соор |41) 7°, 
i= +3, 64,555, 


其 中 。 为 常数 ,选择 之 使 > Plea 一 站 一 1/2, RRES IHE} 
: | 


其 中 x, = xi = 0, П 
x; = i * (logi) "(Іор орі)", (2.116) 
这 时 


一 (一 + o(1))n* ^ (ов) ^C loglogzn) ^, 
—r 


Р LM 
XE B, EE 8 B9 r 阶 平均 相仿 估计 ,必须 有 房 С? В„ЁП >; хе: Í $, 
-2 0。 而 要 后 老成 立 , 必 须 有 ( 见 [281, p. 317) 
| lim У) Pal > 5.76) = 0, Q117) 


但 由 е, 的 分 布 , 易 知 存在 常数 c > 0, 使 当 a 充分 大 时 有 
Р( |2,1 > a) 22 сүа” (logs) (ogloga) 7, (2.118) 
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Di (2.118), K x, 和 S, 的 表达 式 ， 经 过 简单 计算 ， 复 见 存在 常 焕 
с> 0, ¿> 0, 使 当 t 充分 大 时 有 


D P(e 2 s,/z) 


ж 


22 ons 77D.legs-(loglogs)  . > (Торг) 1(loglog#) "" 
= 


Z= ecloglogn)"7?, 

在 (2.116) 中 取 m > 2/r, 91 (2.117) 不 成 立 , 因而 名 不 是 8 的 r+ 
Er seti. 

Ж {е 满足 所 述 条 件 而 12) 满足 (2.115). 

2. r 阶 平 均 棚 合 性 与 弱 相 合 性 是 否 等 价 ”定理 2.1 REH. 在 
2 ЖИЕН GM 条 件 满足 的 情况 下 ， 均 方 相合 性 与 弱 相 合 性 等 
fr. 自然 地 提出 问题 ， 当 1 < 二 + 二 2 Bb. LS 估计 的 + 阶 相 合 性 
与 其 弱 相 合 和 性 是 否 等 价 ， 下 面 举例 证 明 : 即使 在 e ce;，'… 独 
立 同 分 布 的 情况 ,回答 也 是 否定 的 。 这 可 算是 均 方 相合 性 与 + 阶 
C 过 2) 平均 相合 性 之 一 本 质 差别 . 

#126 设 1<r<2ac>1l 686>0 都 是 常数 ， 设 eo 
€i 独立 同 分 布 , e 的 分 布 为 

Ple, л &) = P, = ск 9*"(logk) *, & 2,3, -*‹, 


其 中 。 选择 之 ,使 Sip 一 1/2, X 


P(e = —a) = 1/2, 其 中 а= 2 У. 
E Es = 0, Е|е |" < со, E GAIA ix] 如 下 : 


z = 1, x, = 77Y(lgi)?*, $22. Ж 


f 


S, = >: xš == (; f T oD (loga) 2 


现 确 定 c> 1, 5220, & 
@ < rë < e < tr, 
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往 证 fa 27-0. 9 Á, — 8 — У) ei Sa SCIL), p317) 
iei 
只 需 验 证 以 下 诸 式 : 


УЎР([е,1 m$) 一 0， (2.119) 
# =] 

>; а] nz (3/5, — 0, (2.120) 
25 а ш: ИЕН (х)/51-» 0, (2.121) 


此 处 为 a 之 分 布 ， 为 方便 计 , 以 下 以 4 记 一 常数 ， 每 次 出 现时 
取 值 可 不 同 、 经 初等 计算 (利用 ,mez_ xz/S。 一 0 的 事实 )， 易 得 


IRA > 5,/а) 
<а >) Gul SY og CSa lx) 


< 457 (log$,)"* > k^ (logk)* 
< A(logn) t? 一 po 
即 (2.119)， 类 似 地 证 明 (2.120) 和 (2.121)， 这 肯定 了 饭 WEH 
At. 
现 证 Á, ЖЮ PSEA. DRR E se/s, 为 en 
则 有 


Е|й,—5\'— E | >` z, | 
‚=1 5 


= 27g| 3 гы б 50 


T E| >; a ао | . | (2.122) 


以 J 记 (2.122) 右 边 第 二 项 , WAIL 7, — 0. 实际 上 ,为 证 此 , 只 
需 证 i 
JSE (x esil dc, den y REX 0. (2.123) 


为 证 (2.123)》, 注意 于 Eel = 0 及 (2.120) 知 


^" 


linE [5 € nil de An ) = 0, 


ША urn aki (2.123) , Я Е 
Je = var (> Enit qe, aen ^ 0. (2.124) 
121 
但 由 (2.121), 得 | 
J; = >; vareni це а<о) < > E(ekilaea<6)'— 0, 


QIT (2.124), f (2.123). Ш, B, ASE 8 B z 阶 平 
均 相 合 估计 ， 只 需 证 (2.122) 式 右边 第 一 项 不 趋 于 0 注意 到 
e; Z= —a, Wü max x5, 0 Hx; 都 非 负 ， ае КЬ. 
Cnil de, ions f = l, -+3 f3 都 为 非 负 . 因为 当 rZ 1 Hrs’ 
t. ВАРАН, AG +++) mob oc H 548 


п 
А 
, 
z| У) ehil aea 
P-1 


> > STAJE Ç elire snan) 
iwi 
= A > (x;ÍS,YQog(S,/x,)) et 
i=1 


n 
> AM i7 7" logi) *'2-97?(logn)' 74 
i= 


> А (Оорт) — со, 
其 中 4 0 ЮЛ. GXUEBQT ë, КЕДЕ 8 89 7 阶 平均 相合 估 
iF. | 
3. 另 一 个 有 兴趣 的 问题 是 : 当 所 不 为 + 阶 平均 相合 时 , 是 否 
存在 其 他 的 + 阶 平 均 相 合 线性 估计 ? 利用 $2.2 的 理论 不 难 证 明 ; 
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#1 <2, epep 相互 独立 。 均 值 属 为 0 而 方差 有 界 , B. 
{i} 满足 定理 2.4 的 条 件 (A), 则 当成 不 为 BJ > 阶 平 均 相 合 估计 
时，, 别 无 其 他 线性 的 > 阶 平均 醛 合 估计 存在 。 事实 上 , Ж T. 是 这 
样 的 估计 , 则 T, 25 8 的 弱 相 合 估计 。 这 时 ， 由 定理 2.4 证 明 中 所 
作 的 推理 知 ,T。 也 是 8 的 均 方 相合 估计 。 但 这 样 一 来 ，6。 也 将 是 
8 的 均 方 相合 估计 ， 因 而 更 是 8 的 + 阶 平均 相合 估计 了 . 这 证 明 
了 所 要 的 结果 .当然 ,这 个 结果 不 是 所 提问 题 的 理想 解决 ,因为 候 
ET o 的 二 阶 矩 有 限 ， 在 只 假定 c 的 r 阶 矩 有 限 的 情况 下 ,所 提 
间 题 的 答案 如 何 , 是 一 个 有 兴趣 的 问题 , 

4. 近代 研究 揭示 了 最 小 二 乘 估计 的 若干 不 理想 的 性 质 .因而 
发 展 了 所 谓 “ 稳 健 估 计 ” (robust estimation) 的 方法 。 在 线性 模型 
(2.1) 的 情况 ,为 估计 8, 当 只 假定 误差 的 + 阶 短 (1 < + < 2) 存在 
时 ,更 自然 的 是 考虑 “最 小 + ET VES BIGGER f: 

Уу, — sil = miaf УУУ; — set]. 
这 样 的 所 已 不 再 是 У, ---, Y. HRERS. 关于 它 的 大 样本 
性 质 , 现在 还 没有 千 么 一 般 性 的 结果 .不 过 有 理由 预期 、 在 e; 的 
二 阶 矩 无 限 的 情况 下 , й, 和 LS 估计 ó, 相 比 ， 可 能 有 远 为 优越 的 
大 样本 性 质 ， 考 察 一 个 例子 . 

例 2.7 在 (2.1) 中 取 p — 1, z. = x, Е. еру еру 
独立 问 分 布 ,而 е, 有 Cauchy 分 布 密度 为 a7 1 + z t. 这 相当 
于 估计 Cauchy 分 布 密度 aC [1 十 (z 一 6)9 一 的 对 称 中 心 8。 最 
ЛЖ ЕИ (Y, + +++. Yn 的 分 布 仍 为 上 述 Cauchy 分 布 ， 
因此 在 任何 意义 上 部 没有 相合 性 ， 更 进一步 ; 8 的 任何 形 如 
(2.48) 的 线性 估计 T. 都 不 可 能 是 P 的 弱 相 合 估计 ,事实 上 


T, c, + P >; Eni t >; €nsifj, 
ict i-i 


жаз! D cue 的 分 布 关于 原点 对 称 ,为 要 T。> 9, 必须 
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lim (e + # » eni ) = В, 对 一 切 p, 


而 这 只 在 co 一 0 和 2 cn >l 时 才 可 能 ， ACTU ERE c, 一 0, 
> e = t. 因而 e, == > le, 221. 因 为 T, = 8 + у ee 
ied i=l i-1l 


DE т, D вя Yene 0, AM X) сые, 的 特征 函数 为 
exp( 一 cs1z[)， 这 正 是 сас, 的 特征 函数 . 故 对 任何 s> 0 


(рэ Enit; 


> P(|e,| > £)——0, 

这 证 明了 如 没有 线性 弱 相 合 佑 计 . 

[ETE EC e S SERE uj 

Ё, = Ү,, ee, Y, 的 样本 中 位 数 . 

эщ 8, 的 分 布 ,不 难 证 明 : 对 任何 + > 0, #„ 都 是 8 的 ”> DEM 
相合 估计 。 使 用 Glivenko-Cantelli 5E SE4E ZEE) uEBH, 8, 是 8 的 强 
相合 估计 . #, 还 具有 渐 近 正 态 性 等 优良 的 大 样本 人 性质， 

这 个 例子 使 我 们 相信 ， 线 性 模型 的 “最小 r 3E" y FRP 4B EF 
能 得 出 直 斋 的 成 果 . 但 这 是 一 个 很 困难 的 问题 . 


N 
22 є |= P(le,| 2 є/с„) 
/ 


$24 LS 估计 的 强 相合 性 


《一 ) 历史 概要 如 我 们 所 曾 广 意 过 的 ,线性 模型 回归 系数 的 
LS 佑 计 的 相合 性 问题 ,实际 上 是 古典 大 数 定律 问题 从 一 个 角度 的 
推广 .每 一 个 对 概率 论 略 知 一 二 的 人 都 了 解 ， 和 弱 大 数 律 比较 起 
来 ， 强 大 数 律 是 更 为 困难 和 有 兴趣 的 问题 。 如果 说 弱 大 数 律 在 本 
世纪 三 十 年 代 已 有 了 完满 的 解决 ,那么 ,一 般 独立 变量 序列 的 蝇 大 
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数 律 的 研究 则 一 直 延 续 到 七 十 年 代 。 才 基本 上 可 以 说 有 了 一 个 解 
决 一 一 其 形式 也 比 古典 的 弱 大 数 律 复 杂 得 多 . 因此 就 不 难 想像 ， 
一 般 线性 模型 中 ,回归 系数 的 LS 估计 的 强 相合 问题 是 一 个 颇具 难 
度 的 问题 。 对 这 个 问题 的 研究 ,可 以 说 是 从 七 十 年 代 中 期 开始 的 。 
可 卉 告 蒜 的 是 ,从 那 时 以 来 的 短 短 的 儿 年 中 ,这 个 问题 取得 了 长 足 
的 、 甚 至 可 以 说 是 决定 性 的 进展 . 

为 了 节省 篇 幅 ， 本 节 将 不 采用 历史 发 展 的 自然 次 序 来 叙述 到 
目前 为 止 的 重要 结果 ,而 是 先 给 出 最 新 的 一 般 结果 ,再 由 它 出 发 去 
导出 某 些 在 较 早 时 期 得 出 的 重要 成 果 . 对 于 这 种 叙述 方法 ， 我 们 
觉得 ,在 这 里 花 一 点 篇 幅 对 本 问题 发 展 的 历史 状况 作 些 介 绍 , 可 能 
是 有 益 的 . 

1.1963 年 Eicker 在 [1] 中 得 到 了 一 个 我 们 在 前 面 提 到 过 的 
简单 结果 : 在 一 般 线 性 模型 (2.1) гп, 在 随机 误差 序列 {ер 满足 
GM 条 件 之 下 ,由 (2.7) 可 推出 LS 估计 ñ, 为 弱 相 合 的 ， 这 项 工作 
的 意义 在 于 ,在 文献 中 第 一 次 把 LS 佑 计 的 相合 性 问题 明确 地 提出 
来 ， 这 个 结果 自然 地 启发 了 两 个 研究 方向 。 一 是 条 件 (2.7) 作为 
Ê 的 弱 相 合 性 是 否 必 要 ; 二 是 当 对 {ei} 的 性 质 作 出 某 种 假定 (如 
GM 条 件 , ei, eis ' 独 立 同 分 布 之 类 ) 时 › É, 的 强 相 合 竹 是 否 取决 
于 类 似 (2.7) 式 的 条 件 ， 也 许 是 由 于 难度 较 大 , 这 些 问题 在 此 后 十 
余年 无 所 进展 .到 1976 年 ,出 现 了 两 个 显著 结果 ， 其 一 是 Drygas 
首次 证 明了 (2.7) 的 必要 性 ， 即 定理 2.1; 男 一 个 是 Anderson 和 
Taylor 在 [3] 中 证 明了 : 若 假定 (e 为 独立 同 分 布 序列 ,有 е, — 
NCO, P), WHC a 为 8 的 强 想 合 估计 . 

这 个 结果 虽然 由 于 对 Ced 的 分 布 限制 过 严 而 缺乏 一 般 性 ; 但 
仍 有 重要 的 意义 . 它 启示 我 们 ,在 P. 的 强 相 合 问 题 中 ,57! KAF 
0 的 速度 可 能 要 起 重要 作用 、 因 为 正 态 性 的 放弃 可 能 会 由 SI E 
于 0 的 一 定 速度 而 得 到 补偿 后 来 的 发 展 证 明 这 个 想法 是 正确 
ВО. RR 这 项 工作 中 提出 的 方法 主要 概括 在 本 章 的 引 理 2.1 rh, 
以 后 证 明 这 是 一 项 有 用 的 工具 . | 

2. 也 是 在 1976 Æ, Anderson 和 Taylor 放宽 [ep 20 Е 8 
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列 的 假定 ,而 假定 co e cc FREI ses 服从 所 谓 “ 广 Gauss 
分 布 ” ,就 是 说 ,存在 常数 4>0, 使 对 任何 实数 1 有 Eege, 
再 加 上 Ee, 一 0, 他们 证 明了 ( 见 [4]): Ж 
$ç! = o(1l/logn), (2.125) 

ДІА, 为 8 的 强 相合 估计 .这 是 第 一 个 例子 ,说 明 对 {ci} 的 要 求 的 
降低 ,可 由 对 Sa 趋 于 0 的 速度 的 要 求 而 得 到 补偿 . 

3. 与 此 同时 Drygas 在 [2] 中 将 对 {ei} 的 要 求 大 为 放松 ; 他 中 
ER {ei} ЕВЕ Е, АЖС. 但 对 试验 点 列 
tx; = (хд у x;)] 要 求 则 较 复杂 些 , 即 


У) r= 00, j=l, 3p (2.126) 
x 二 1 Ë 
以 及 


рә xh... 2j } |= 0(1), (2.127) 

3X Ен | || RB Be 4 诸 元 的 绝对 值 的 最 大 者 ,而 бар (а, з, a} 

表示 主 对 角 线 元 依次 为 a. vas 的 对 角 阵 . 在 这 些 条 件 下 

Drygas 证 明了 Á, 为 8 的 强 想 合 估 计 、 此 处 关于 (z;) 的 条 件 不 仅 

DES, 显然 , 当 p 一 1 时 条 件 (2.126) 和 (2.127) 就 是 (2.7)( 这 个 
情况 在 [3] 中 已 提 到 了 ) ,但 当 p 2: 2 时 则 比 (2.7) 要 强 ， | 

4. 1977 Æ, RTR Robbins 在 [6] 中 讨论 了 一 元 回归 的 情 

m. 即 Ү; = ñ, + #,х; + e, š w l, °", n "`", 他 们 假定 £1» 

a， "独立 同 分 布 , 且 Ее, = 0,5 Е{ (108+ |.| У} < oo 对 某 个 


r> lH (е0) 满足 条 件 im »( x; — aiL TEY = co( 这 
аюу Же 


与 条 件 (2.7) 相 当 ), 证 明了 8; BD LS iiit fan 为 强 相 合 的 . 
5. 1979 年 ， 黎 子 良 等 ( 见 [7]) 得 到 了 一 个 很 深刻 的 结果 . 他 
TRE {е} 满足 如 下 的 条 件 : 


《C): 若 У c < co, Bl У се, 以 概率 11. (2.128) 
在 文献 [19] 中 把 满足 这 个 条 件 的 【ef》 称 作 是 一 个 “收敛 系 
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f&" (Convergence system) ， 笋 子 良 等 证 明 : 若 Leid 为 一 收敛 系 绕 
BREZEN 2, 为 了 的 强 相合 估计 ， 条 件 (C) 是 一 个 比较 
弦 的 要 求 ， 如 所 周知 ( 见 第 一 章 定理 1.25), 当 e en AN 
ж, Бе, = 0 їй Eco 财 , 或 更 一 般 地 , 当 6.61, ROT. Een 
0, i= 1,2,:** II supE ei < oo 时 , Ce; Hl AR (p (C). 又 如 当 


Ке) ЖЕЎИ supEei < co ËP, (ep 满足 条 件 (C)， 这 样 一 


来 , 黎 氏 等 人 的 结果 包含 了 我 们 在 前 面 几 条 中 所 到 的 所 有 结果 , 特 
别 是 明确 了 这 样 一 个 事实 : 在 Cis C23"°" 独立 同 分 布 , 且 Ёе, MA 
0, Ecl « oo 时 , (2.7) 4X3 f, 弱 相 合 、 也 是 其 强 相合 的 充 要 条 
Е. 这 个 结论 在 一 个 要 当 的 时 期 内 曾 是 努力 的 目标 . 

6. 黎 氏 等 人 的 上 述 结 果 虽 有 很 大 的 普遍 性 ， 但 还 没有 包括 两 
种 重要 情况 : 一 是 [eg 满足 GM 条 件 ,一 是 (е) 的 二 阶 矩 无 限 的 
TUE. (Un. HE ce … 独立 , B. Бе = 0, Ejla S&M 
co, XXE r€ [1, 2) 成 立 。 前 一 个 情况 的 重要 性 在 于 GM 条 件 
在 线性 模型 估计 理论 中 的 作用 ， 后 一 情况 的 重要 性 则 是 由 于 : 从 
理论 上 说 ,在 讨论 回归 系 数 8 的 估计 时 ,并 不 是 非 要 假定 误差 方差 
ARAI. 正 是 在 古典 大 数 定律 中 ， 人 们 致力 于 在 只 假定 随机 误 
莽 的 一 阶 矩 有 限 之 下 去 讨论 问题 . 因此 , 如果 线 性 模型 回 好 系数 
LS 估计 的 相合 狂 问 题 要 达到 可 与 古典 大 数 定律 相 比 的 成 就 ， 就 不 
能 只 局 限于 考虑 随机 误差 的 二 阶 矩 存在 的 情况 ， 

本 书 作者 之 一 考察 了 以 上 这 两 种 情况 ( 见 [9],[12]), 在 {ei} 
服从 GM 条 件 时 ,他 得 到 了 如 下 的 结果 : 若 s;' = o/a), E 
Жө) 定义 于 «> 4(4 > 0 任意 指定 ), 非 降 , 且 | -一 上 一 dx 

47 W f(x) 
« со, ЖШ #, 为 的 强 相合 估计 。 例 如 ，f(x) — Сор х) 满足 
LRR. 对 后 一 种 情况 ， 他 证 明了 ， 在 ct ex, …… :独立 同 分 
fü, Ег = 0, Е |а| <o xtX 2610,1) bF, Ж Sz! 以 
O(n 9 VatP(log 2)*) CHET a > OBJIEEEXST- 0. BEI ЕЖЕ 
与 (x) 有 关 的 条 件 时 ,名 , 为 8 的 强 相合 估计 。 这些 结果 弥补 了 和 获 
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慌 等 人 的 工作 的 一 个 重要 缺口 。 

7. 在 1980 年 , 陈 桂 景 在 研究 ó, 的 强 相 合 间 题 时 发 现 , 可 以 把 
上 面 介绍 的 头绪 纷繁 的 结果 统一 在 一 个 包罗 很 广 的 定理 之 内 。 这 
项 工作 后 来 经 当时 适 在 我 国 讲学 的 美 籍 统计 学 者 黎 子 良 的 参与 
最 后 以 文献 [15] 的 形式 提出 来 。 这 就 是 将 在 下 一 段 详细 介绍 的 、 
本 节 的 基本 定理 (定理 2.7). 应 当 指出 ,这 个 基本 定理 的 意义 不 仅 
在 于 总 结 已 有 的 成 果 , 由 之 还 得 出 一 些 新 事实 . 

在 结束 这 一 段 历史 概述 时 我 们 训 指 出 ,虽然 在 LS 估计 的 强 根 
合 性 的 研究 方面 已 取得 了 很 大 进展 ， 但 迄今 为 止 结果 还 并 未 达到 
完整 。 一 个 重要 的 不 足 之 处 在 于 ， 记 今 为 止 的 结果 多 是 关于 充分 
条 件 方面 的 ,对 必要 条 件 知 道 得 很 少 . 具体 说 来 , 只 在 (2.7) 是 充 
分 条 和 件 的 情况 下 ,可 肯定 它 也 是 必要 条 传 (其 他 个 别 结果 郊 后 文 )。 
这 是 由 于 以 下 的 简单 事实 : 由 于 定理 2.1, 条件 (2.7) 对 Á, 8088 
相合 为 必要 ， 改 对 强 和 相合 也 必要 。 从 本 书 作者 研究 B. 的 强 相合 
问题 得 出 的 印象 是 : 要 在 这 方面 取得 决定 福 的 进展 。 还 须 作 艰巨 
的 努力 ， 

(=) LS 估计 强 相合 性 的 基本 定理 ”回忆 前 面 提 到 过 的 定 
X: 称 一 串 随 机 变量 (раки, НЕЯ Е 


У) e < oo 的 常数 (Y, ВК У) св, ИИК Яй. 


本 段 的 旧 的 是 证 明 下 面 的 基本 定理 (1151). 
定理 2.7 ”假定 在 线性 模型 (2.1) 中 ; 
(D {ше} у-ще, 此 处 8o 82 "`° 都 是 常数 ， 满足 条 


件 
lal > lel 2-965 (2.129) 
Gi) HDn ге 1,505, р, A 
üm 0077 = Ба 00,2) = 0; (2.130) 


(ш) 设 于 为 定义 在 (0， 0) 上 的 正 值 函数 ,至 
[GO [x^ со эщ х}0, (2.131) 
* 77 ° 


对 某 个 4 > 0, 有 | l z< co, (2.132) 


1б) 
则 当 а > оо 时 有 
Á, — В, = of Ql 16,1), а. з. (2.133) 
这 个 定理 证 明 的 思路 源 出 于 [71, 并 在 [15] 中 得 到 进一步 的 发 
挥 。 我 们 将 把 证 明 的 主要 部 分 分 解 为 一 盾 引 理 , 这 些 引 理 涉 及 收 
伍 系 统 的 性 质 ,并 对 B BJ LS 估计 Aa 的 结构 作 了 细致 的 分 解 ， 
引 理 2.6 (1) 若 eid 为 一 收敛 系统 ， Yay 为 一 有 界 数 列 ， 则 
{qies} 也 是 收敛 系统 . 
Gi) Ж (ao 和 (2) 为 两 数列 ,满足 条 件 
|z| S coil, i= 1,2,7", 对 某 个 € > 0, 
Ји {ae 为 一 收敛 系统 时 ,{aieiy 也 是 一 收 敏 系统。 
证 明显 然 ,从 略 . | . 
引 理 2.7 设 las; mpi» `` di 和 les; Cms 57 jJ 为 两 数列 ， 
as >= 0, Н. 
2 Ula, < oo， (2.134) 


此 处 4.— A + Dol, 4 20. 则 有 
| «o, (2.135) 


zx 


=з ` {ж 


сајаг) а < 00, (2.136) 
> Aral ds 
= SK 2 eonim] Ajo, 一 ena} 
Fä (> саа) ; (2.137) 
UT 


一 一 -一 -一 -一 MÀ 


此 处 约定 以 c,- = 0. 
证 ， 先 证 (2.137) 式 ， 如 常 ,以 1; 记 满 足 条 件 >,c < co 的 


实数 列 Le; 所 构成 的 空间 ;此 空间 中 向 量 的 模 ( 即 范 数 , A е ig 
之 )、 内 积 和 正 交 性 ( 记 为 x 上 Lv) 的 定义 都 如 常 。 现 对 i m, mt 
1, -定义 UT = (un zm — VY 如 下 : 
и == M Aaa l Ais Mi no m 1, 

= asia] dis M тп 1, 

= —], M # = ¿+ 1, 

= 0, 3X s > í + 2, 
不 难 验证 : 

[eU lp] — c34;,,/4;, UQ LU 4 i x j. 

因而 由 C2.134) 得 


2 e U € li» 


> «ue - > eii Ai. (2.138) 
因为 
5) сш. = К къу Citind A; (2.139) 


且 对 固定 的 >m A | 
2, cut? = а, > cua Ai — Cui (2.140) 


Hi (2.138)—(2.140), BKS (2.137). 在 (2.137) cu e; 改 为 
ciy 其 中 ср |а| X 24209, ci || E агь < 0, 06 


(21е) < oo， 因 而 证 明了 (2.135) 式 . 


最 后 ， 由 (2.134) 式 ， 并 利用 不 等 式 z © 2G — у) + 2, 
得 


2X2 


« 23 йз +2 xx eid Ai) aa са 


1 
Ја) аф 
f 


«4» A, „ЈА, < о, ` 


这 证 明了 (2.136) 式 。 引 理 证 毕 。 
用 此 引 理 可 证 明 收敛 系统 下 述 有 用 性 质 。 


引 理 2.8 BE: 
G) E {вы}, (2,3 为 两 个 数列 ,an 2€ 0, 且 存 在 c > 0, 0 
|2,1 < ela], 071,2, 555, (2.141) 


Gi) ig.) 为 一 数列 ， 满足 条 件 igl > |g| >- > 0 B. 
{ше} 为 一 收敛 系统 ， 
id 4;- aba, Im. ДРЕ] 


I giai Ain A A (278), Pm m} (2.142) 
是 一 收敛 系统 ， 
证 。 依 定义 ,只 需 证 明 :对 任 -满足 条 件 D соо 的 数列 
hA | : 
X аена (У) де, Ja. s бй. (2.143) 
FW ¿ = €g (A; 470, і 22 т, WA 
У сї (A ATA) < o. (2.144) 
而 (2.143) 等 价 于 
Xesar( 3) e, ) а. з. Ш. (2.145) 
(2.144), 9 cfg 代替 引 理 2.7 中 的 с, 0] ER (2.136) R 
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人 3 А с j as < 09, (2.146) 
而 由 (2.135) 得 | 
> асланы) < оо. (2.147) 
记 I 
pesada. р = У [еза А; | 
nl 21 


并 注意 0 < |g'| < dez] «m. 0.147) 91р] < оо, pt 
90, XH ?一 co pzl40. 于 是 有 


E i . 
У) uand Уже; 
izm j=1 
n m-i t 
-~ b сіва > 5317 T >] ájej ) 
iam 1 m 
A n n 
== >; ieil Pn- — Pa) + A tjej > caj Ai 
mr jm iei 
m=] з 
TE ok: ^ 
= m aje psa — Pr) + bs Pi-diej 
j=l j=m 


— S аср, + 1,— l. (2.148) 
j =m 


щл co 时 pua — Pa > paas HORS пә оо PF, 1, а. з. 
收敛 注意 到 (2.146) 式 当 把 其 中 的 g'un 换 成 其 绝对 值 时 {Л 
保持 成 立 , 并 由 Chr |} 的 非 降 性 ,得 到 


2j (piil gi» 


< (егин) cb < о. 


jemoi-i 


于 是 由 关于 (gel 为 收敛 系统 的 假定 ， 推 出 当 = 一 со Bi. hA 
a. з. 收敛 ， 这 个 事实 当 把 五 中 的 eas 换 成 六 :时 仍 对 。 因 为 当 
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п» оо |у 让 上 0, 轩 Kronecker 引 理 (网 128]:p. 238), 知 当 m> 
oo 时 ,有 


FA- 


"n 
< pea bz йс) 


E 
- 
4j6j 

i =m i =m 


由 以 上 对 Z D, 和 证 明 的 事实 ,根据 (2.148)* 就 证 上 了 (2.145)， 
如 前 所 述 , 这 就 证 明了 本 引 理 . 
引 理 2.9 it 4222. id 
T; = Ga, tas Tim Qas tta tA. 


X4 н, = У TTL Зен 


| > P; | 

H, = n : 

P, 0, 

Qo = УАР, Р, = УФ. ‚ (2.149) 
1 1 


JE п 22 т „Н 为 正定 方 阵 ,此 处 т> K. IX гу, es" 为 
一 数列 。 记 


-> (0, а. s. 


其 中 


zn 一 > Ga — Р.О?) 


5 == > (za E P2O51I 个 ;2， 


fa = t Р, Or n 
hn = ta — Paaran a. 
W4 mm 时 ,以 下 诸 关 系 式 成 立 : _ 
G) s = Snai F Ga 一 P On fa FO q T0: a) 


m= 


G) Z,— Z, + >; f (e 一 ТЭ» fj). 


т =т+ y 


Gü) T;H;L, (> T,«,) 一 之 fe.) 十 加 -is 1 
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(iv) A, = fl + POLT), 

O) 1+ TH; T, = O H TIOLSTOS ua 

UE. Gi), Gi) 实际 上 就 是 引 理 2.1 的 (2.11) 和 (2.24)。 为 证 
Gii), 5 4 = Hz, 分 块 : 


-1 — а dy 
á i (a 4) 
其 中 an Ж—{т—9]. ЕНЕ {ЕГЕТНЕ К: 
Q5 = Án auda, ,(Q2.150) 
Оп, = Quid, == Р, 054, (2.151) 
От = Sk 一 Р,,ОМР„, = Уа-а» (2.152) 


其 中 (2.152) 的 后 一 等 式 可 由 (2.149) 验 证。 因为 T; — (л. TD, 
当 n> т 时 得 


n-i 


TU» Tie; 
1 
»—-i n—1 
== „(о tae, + Aa ?,) 
1 1 
m—1 n-1 x 
+T, (4. > fies 十 4223] Фе) 
* k 1 
= (z, + an Trán) C93 te, + 45? Pies) 
+ 1 1 
+ 7(Ав 一 a Ann) У) Туе; 
1 
А, 2 ^. 
= (z, — P, 0.1 T,)a, >; Ga — Р, „О.Т Je, 
ici 
+ 1:0: 
1 
" yaer 
Cn RA P0: Za ss 十 T033 5 Tien 
1 
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此 即 《ii、 这 里 最 司 一 步 是 报 据 (2.152) 式 。 其 前 面 一 步 则 是 根据 
(2.150)1(2.151). 
为 证 GO. (v), ERE f, A h, 的 定义 , 当 a > m 时 得 
ha — fa = (P OT — Р, О), 
= ((P; — Р) — P O3 COn — 0.) 02A. 
= G.T; PQSTSÓ IP. (3(2.149)) 


ш RETO. ^ 
这 证 明了 Gv). 又 对 bg, ўа 1, 5 
єр = 1, А г] сц е 0, NL ZA (2.153) 


B Gu) 知 , 对 j=l, 6360 —1, 9 


n—1 
T.H;, > T; e; 
上 


n-i s—i 
= 1.071, > Te; + (halin) > Ga Р, a0zhTe;. 
ici Ez 
(2.154) 
注意 由 (2.149) 得 出 的 


»—1 


> Cta — Р, Ох), = 0, 
再 根据 (2.153),(2.1547 ,得 


n—1 


TH; T, = TIH.N У TTH: Ta 
$ 1 
т "n—1 
ре S (тунд, >; Tiea) 
i=t i=) 
n s-i 2 
二 (025 > m) 
i=l #=1 


+ GO, say s Ga 一 Po 071 P y 
#=1 


ти пост, + ДАГИ 
= P Oua n + O H POL oY ilsa- 
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这 里 最 同一 步 很 据 (ivy， 其 前 面 一 步 根据 s, 的 定义 。 由 .上 式 
得 
1 十 r¿H;1, T, 
= (O + PO HE + O + ОУУ Biel 
= (1 + TOL fuss esu. 
最 后 一 步 根据 (i)， 这 证 明了 (v) 因而 完成 了 引 理 的 证 归 . 


引 理 210 i$ Ti T; A k ERDERA» H, 一 DIT;Ti. 


设 Н, 为 正定 方 阵 ( 对 某 个 m). Kien AAIR al 
|g| 22 -+- > 0,8. {gei} 为 一 收 化 系统， 则 


fe Тын D Тек + Ta HP T 7,2 m} (2.155) 
1 


为 一 收敛 系统 . 

证 。 当 二 1 时 ，7,， 上 ,部 是 实数 。 不 难看 而， 这 时 引 理 
2.10 变 为 引 理 2.8 的 特殊 情况 ， 这 证 明了 当下 一 1 时 本 引 理 结论 
gr. 对 一 般 情 况 用 数学 归纳 法 ; 假定 引 悍 结论 当 АИ А 1 
时 成 立 . 

根据 定义 为 要 证 〈2.155) 为 收 伊 系统， 只 须 证 明 对 任何 
(ye, A 


四 ç | 
>, C;g; T Hr' > Tie (1 + Ti íHP TQ) 2 a. 8. ИЖ. 
¿== 1 


(2.156) 
id r; = eg 十 了 TD 则 问题 归结 为 由 
У св + ТН? Тл) < o (2.157) 
来 证 明 
5 c; T uH; 5 Tie; з. s. ИИ. (2.158) 
£m 1 


沿用 引 理 2.9 的 记号 ， 由 该 引 理 之 (i 让 ,有 
* $5 < 


> c Ti íH;! Y Tie; 
1 


一 5 e TiaQr > Tie »$ chi m fs. (2.159) 
由 引 理 2.9 的 (0), (у) 及 (2.157), 得 
| > eig; aA + Pnr n) 


ne 
= 2 сїр; (1 T T; HP Ta) < 00, 


¿=m 


注意 个 ,是 一 1 维 向 量 而 0; 是 一 1 阶 方 阵 ， 由 上 式 及 归纳 
BH 

> сог! s Фер a. s. бй. | 
Hic R 1.159) 50, Е (2.158), RARE | 


У; снн a. s. ЩЕ. (2.160) 


由 引 理 2.9 :2(1), Ч z > m 时 有 
Zn = gm + P2 7i е; - to, > Tiei) 


TEDN OE 
这 里 为 方便 计 ,已 记 — 
So S Te, i>m (2161) 
因此 | 
s сн si 


- esso pe фе = p 


> 86 = 


n » t 
= >` (cA;alsi)a, + >; € ibi assi! > ће; 
i cam m+ 


frm. 


= 22 (ешын) 2i fis 
АЛ + L, — l. (2.162) 
ВЗ 2.9 89 Gv), 33 ; ZZ m 时 有 
е ы == efi + Р; ог! T a) Ë fla (2.163) 
其 中 
сў - e;C1 d Fiar Êa, 
fta = Ай Tingr tuu, (2.1647 
由 引 理 2.9 的 GD, 当 0 2 m 时 有 | 


за = „+ s RA + NOLS) 


E x z”. (2.165) 
由 引 理 2.9 的 (vy), 及 (2.157), 有 
2: (сўе sa ls; 


=” > (с! г ЖЯ + Ti QCP sa fs; 


= Ха + ТНТ) «co. (2.166) 


这 相当 于 引 理 2.8 中 的 (2.144) 式 ， 再 注意 [А] < Url, masm 
2.8 知 , 当 m — co 时 
| -De fas D a. s. Ц. (2.167) 
RS о 

> гүм = Зава < о, (2.163) 
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一 -一 一 -一 -一 一 一 一 一、 -一 


Щ n>m 时 , 记 
Pa 一 po e? ffals; = >: Ci 


pz == 2) etas нти Уе alla, 
ERO gi S erl o. d(.168), p, ЯП pz ВЕ У 
的 级 数 都 收敛 . 因此 

一 ONIS У, 


mi 2 fiš; >; снн 
= p fi§ipi-1 一 ( >) nE) 
H (2.164)—(2.166) , 5 FH 1 gi? 的 非 降 性 :得 
>) Ср ы аы YC + fuor Tu 


- Xu омо rt 


< S (3 leey lla) rt < eo. 


最 后 一 步 利用 了 (2.136) A. 由 .上 式 , (2.157), 并 利用 归纳 假设 ， 
导 


Er 


> hp - E, = 223 тако (У) а. s. Ш (2.169) 
因为 在 (2.169) 式 中 , 把 р. ЖА pf. 也 对 ,而且 当 л co 时 


pz 40, 类似 于 引 理 2.8 的 证 明 ， 并 利用 Kronecker 引 理 ， 便 得 当 - 


п оо 时 


PT < pose, — 0, а. а, 
ті т 


= — =... 


由 此 及 (2.169), 知 当 п со Wh 29 a. s. 收效. 显然 ,这 一 事实 
对 廿 也 成 立 。 由 此 及 (2.167)，(2.162) , 便 得 (2.158》， 如 上 所 述 ， 
这 证 明了 本 引 理 . 

由 引 理 2.8 和 引 理 2.10， 可 得 出 关于 收敛 系统 的 一 些 有 趣 性 
Ж. 可 参看 [151， 

3[8 211 设 数列 (gj 满足 条 件 lal > lel ze, 
{ei} 为 一 随机 变量 序列 ,使 {gie;} 为 一 收敛 系统 . 又 数列 (o) ЇЙ 
ВЖ A, = У) аі» co (34 n— co)。 则 对 任 一 定义 在 (0，co) 


1 


上 的 函数 А, WER tk 
0 < (a) Í oo x Í оо, 
" E — (2170) 
[554 < оо HRA ¿> 0, 


Ş ue = 0 WEAS / lel) as QUTD 


UE. ЕЖЕ RS ELE „Ай GUBUBCSIELIS UA EREDA SAQUE 
ТЕН ЖЕ m, 致 


3E 11A (A;) < со, 
SOLE ono P GR А-а > c, WE 
2; aif À(A;) 一 I — Ara) ALA) 


< » dx [À Cr) < a dr < оо, 
HARKE. [M gt. ku S RR EH аА 
S agis / V A) a. s й, (2472) 


由 1:1 的 非 增 性 及 (2.170)， 知 当 п t oo 时 ,V ACA.) Ге, (too. 
因此 册 Kronecker 5]284& (2.172) BD (2.171). ЗШЕ, 


定理 2.7 的 证 明 . 有 了 以 上 的 准备 , 现在 很 容易 完成 定理 2.7 
的 证 明 。 为 确定 计 取 :一 1. 定义 
Alx) = xf(ljx), 0 < x < оо, 
如 在 (2.132) 式 中 作 变 数 代 换 у = х, Y 26 x, 即 知 上 式 定 
义 的 函数 到 满 足 条 件 42.1707。 由 引 理 2.11， 直 接 得 知 定理 2.7 的 
结论 当 ?一 1 工时 成 立 . 现 设 pl2. ЖОНУ 2.1 的 记号 ， 由 
(2.22)—(2.24), 


Bs — Bi = us tas (2.173) 
其 中 
x (гї? -1 
= sy + LEE тә, (2.174) 


Ha = и, 


十 У (he — Bi TH ine). (2.175) 


£ mmol 


要 证 的 结果 (2.133) 可 表 为 ， 当 5 — co 
не = OCV G) ligo a s ` (2.176) 


由 (2.174) 知 > hi < s> X. {ше} 为 收 合 系统 ,由 引 理 2.11 得 
知 , 当 # 一 00 时 
>, hie; = об\/ hos) /1g.1) s. s. (2.177) 


HE 2.6, 注意 |g。| 非 增 , 及 H 一 У туту, 5158 210 88 
(zao n2 m + 1) 为 收 全 系统 ,此 处 
75 = Ta Hh > Tie (1 + TLH,MT,) ^, 
因此 由 (2.174) 式 及 引 理 210,8 
> итиў) Т; 


- 90 * 


一 5 Au. + THT y", 
= (Мо) Пе). | (2.178) 
由 (2.177) 和 (2.178) 即 得 (2.176), 从 而 完成 了 定理 2.7 的 证 明 . 
(=) 基本 定理 的 应 用 ”在 前 面 我 们 曾 提 到 ,上 面 证 明 的 基本 
定理 2.7 几乎 概括 了 迄今 为 止 关 于 LS 估计 记 的 强 相合 性 的 所 有 
研究 成 果 。 本 有 段 的 内 容 就 是 把 这 一 论断 具体 化 . 
设 有 线性 模型 (2.1}。 我 们 仍 沿用 前 面 的 记号 , 往 证 以 下 的 定 
Ж; 
定理 2.8 ий z 定义 于 (0, оо), ЖЕЖ 
G) 0 < gG2/x100,24 240, 
Gi) 对 某 个 4 > 0, 有 | = dx < co, 
• р(х) 


(ш) {gP en) 290 SR ER. 


Xd 

йт? = 0. (2.179) 
则 有 

Em, =f a. s. (2.180) 


dE. у=. 则 由 条 件 G), (0), Anf HR (2.131) 和 
(2.132). X4 各 一 gps 名) 由 于 eP 单调 非 增 ， 且 由 条 件 G) 
Ap e JERE, An {gs。} 为 单调 非 增 序列 ， 因而 由 定理 2.7 的 结论 
《2.133) 式 即 得 (2.180)， 定 理 证 毕 . 

现 假设 a. в, ttt 为 一 收 伍 系统 。 在 定理 2.7 中 取 g 一 
2 т "90 1, 又 任 给 定 6 > 1, 并 令 

: z]lgz]', 3 0 < z< s, 
IG) -| 
&llogg|?, 3 +> е. 
不 难看 出 当 e > 充分 小 时 ,条件 (2.1312 和 (2.132) 都 成 立 ， 注 
Жї (ge) 为 一 收敛 系统 。 由 定理 2.7 立即 得 到 17] 中 给 出 的 重要 
结果 : 


(2.181) 


——— ——— — —————— 一- 


定理 2.9 эщ Нш? 一 上 时 ,对 乍 何 给 定 的 6 > 1, л-> 

co 时 有 
Êin — В. = обо? | log 0100790), а. з. (2.182) 
E 26 — Fr XE E SES Е) — Sk 35 EE. 035 29 0 HH 
互 独立 随机 变量 序列 是 拷 差 序列 的 特例 , Ae Eo ЛЕ 2.9 特别 得 出 : 
Ф e. е cc: REI, Ee = EeQ—-—0H supEci<0%0, 


则 当 552—0 BF, é, 为 了 的 强 相 合 估计 . 这 个 结果 包含 了 文献 
[1] 一 [6] 中 的 全 部 结果 作为 其 特例. 不仅 如 此 、《2.182) RÆ S7 
汶 一 定 的 速度 趋 于 0 时 ， 给 出 了 Á.— 8 的 数量 级 的 估计 ， 文 献 
[7] 还 给 出 了 定理 2.9 的 其 他 一 些 应 用 , 例如 , 当 es en "55 为 均 
值 为 0 的 平稳 Gauss БЕГ, Е 


MERCI « оо 
#=1 


的 情况 . 

XE (e) 满足 GM 条 件 的 情况 下 (事实 上 ， 只 需 假 定 方差 有 界 
最 可 ,不 必 相 等 ， 又 注意 此 时 Les КУЛАА 9), Ve TR 26 
在 [9] 中 讨论 了 饥 的 强 相 合 性 问题 , 所 得 结果 已 在 本 节 (一 ) 中 引 
述 过 了 . 陈 的 结果 可 由 基本 定理 2.7 推 负 ,附带 给 出 收敛 速度 : 

定理 210 设 (6) 满足 条 件 : Ee = Eco 一 …' = 0, 
Eze; = 0 M їзє], supEet < оо. Xie тїрї? =0, 则 对 任 
£ 8771 有 s 

Ên — B = ol (010 ] log oip)? logn}, a. s. (2.183) 
特别 , 若 对 菜 个 5090 有 
v(? = O{f(logn) "(log logs) ^], (2.184) 
JU ñ,, 为 p, 的 强 相合 估计 . 

ШЕ. ВЕЗА АСЛ ВЕ GEM 1.23), AWA {e} 
满足 术 定 理 条 年 时 ,{ei| log?，! 20 2) о. PE (2.181) 
ELAR f， 并 令 gz, = (logi) 5 ;2 2, go— 10, 出 定理 
2.7 的 (2.133) 式 , 立 得 本 定理 的 前 半 部 , 即 (2.183) 式 .定理 的 后 半 
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部 直接 从 前 半 推 出 ， 

下 面 的 例子 说 了 明 , 条 忻 (2.184) 已 不 能 作 实 质 性 的 改善 . 

例 2.8 ФЕ(21) Н p—1,z, = x; = }„х„ = (log nlog log nÍ 
п) ЭҢ 5 23. 于 是 


É, — В = > xieif Sas (2.185) 
此 处 {61} 待 选 定 ,而 B 
= $i å = -o()XlogoYCloglogn)/2. — (2186) 
Ж әй = зг = O((loga2) '(log log 2). (RIA 
E ао = o, 


外 第 一 章 定理 1.24 知 ,存在 满足 GM 条 件 的 随机 变量 序列 {e} 
致 


Bxies1S。 处 处 发 散 . (2.187) 
再 由 下 面 将 证 明 的 引 理 2.12, 由 (2.187) 可 淮 出 Dxies/5S。 当 on 


co 时 处 处 发 散 ， 若 取 此 {ej} 作为 模型 《2.1) 中 的 随机 误差 序列 ， 
Ripa (2.185) 0. 8, 不 是 B, 的 强 相 合 枯 订 . 

因此 ,在 GM REF ,ó, 强 相 合 的 条 件 不 能 削弱 为 

5;' = O(Clog n)"Clog log »)7). 
当然 ,这 并 不 意味 着 条 件 (2. 184) 是 必要 的 ， 比方 说 ; (2.184) 可 前 
80: 对 某 个 5>1Ң 
vi? = O(log n) "log log n) Пов log юл» 

仍 能 维持 B, 的 强 相合 竹 . 

引 理 212 设 随机 变量 序列 {x;} 满足 条 件 ; 

Ек < оо, i= L. 7,+-+; Емш; == 0, 4 i% j. (2.198) 


іа О, = Уа, з, = У) Ed. E70, B 
1 L 
Sn —* oo, Ен? - 0C), M п — 90. (2.189) 
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дї: 
O бё = SU, a s kek, 
Gi) асю т ЕР О, # 
[Xi «1s iik] п о, Give. KEERN D, 


[> Ha] sn в} n о, 一 LimU,/s, EN oND. 
证 。 由 (2.188) 知 
Е|й„| <V EU =V sn. 
又 由 (2.189) 知 ,存在 c> 0, 5,22 sans 1—0] н. dX 
(5 3 一 21,957 н (“a s) soson) 


< Miss $4). 


因而 由 s, EH. ims, — со, 
E (> (一 =.) 


< c? >; БЫ ОЛКУ, 
=< < r x dx < co, 
这 证 明了 OD. іа | 
- {5 си sto, ж}. 
则 Qu 的 概率 为 1， 因 为 
Ў = Шы» Una S Gr 00, 


知 在 0。 上 ,级 数 立 la 的 收敛 性 与 序列 {U。/so} 的 收 伊 性 等 价 ， 
而 且 由 Kronecker 引 更 知 , 当 它 们 收 敏 时 ，U,/s。 只 能 有 极限 0. 
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这 证 明了 (0 ,因而 完成 了 引 理 的 证 明 . 

4. 随机 误 莽 的 二 阶 矩 为 无 限 的 情况 . БЕЖЕН ЖААЛ AG 
# r€[1. 2) 使 supEleil' < oo 的 情况 下 ,po 的 强 相合 性 问题 ， 
所 得 结果 见 [10] ,定理 3, 

由 基本 定理 2.7 出 发 ,不 难 在 这 个 情况 下 给 出 一 个 定理 CT 
定理 2.11). 这 个 定理 在 条 件 上 较 陈 所 担 的 条 件 有 所 简化 和 削弱 . 
但 在 下 文 的 杂 件 (2.190) 中 ,[10] 中 的 定理 3 只 要 求 8 > 1. 

定理 2.11 i (5) ЮЕ, H. supE [ej|* < оо ЖА 
r€[1, 2). XBRE 

ví? 一 О(п 9 Пора | 727), HRA 8'2-2/:. (2.190) 
HJ #\„ 为 8, 的 强 相 合 估 计 . 更 确切 地 ,有 - 
000 Ên 8, = o((n9 Vo | log v YA), a. s, (2.191) 
证 .根据 下 文 证 明 的 引 理 2.13, 
gio 1, ga =n OP logn) 9^, Щщ + > 2, 
4 的 意义 见 下 。 又 令 f 了 由 (2.181) 给 出 ,其 中 leser -Q- 
r)jr， 而 4 一 6 一 8。 ÆA 22 (2 一 1)/r。 用 定理 2.7 的 
(2.133) ,2749(2.191). 定理 证 毕 ， ; 
引 理 213. 给 定 reli, 2)、 设 {е 为 一 靳 差 序列 ,使 


supE 1,17 < со. Xd (gr йш >ш] < оо, ДЇ g) 26 


— жж. 
W. ER (ej 6. 由 引 理 假定 ,并 利用 Holder KER, 得 


Уе" (3 zu (> gite yn n 
H 


Tm supE |е;|” < оо, 
> Eluga < o. 
再 由 第 一 章 定理 125, Ж] D) uge a. s. Ий. 这 证 明了 本 引 
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理 . 

MP e, ex .满足 定理 2.11 的 条 忻 且 为 同 分 布 时 , 定理 中 的 
R g > 2/r 可 削弱 为 ¿$> 1， 妈 达到 与 110] 一 样 的 条 件 。 事 
实 上 ,用 定理 2.7 可 得 到 下 述 更 一 般 的 结果 : 

定理 212 设 40, b > 0, PR 为 定义 在 fo ©) 
数 ,满足 条 件 F(a) =b, UE 

Е(х){оо, х?/ Е (х) 00, 34 xto0. (2.192) 
Ысак БЫ Юй. WE esent 为 一 独立 同 分 布 的 随机 变量 序 
列 , 满 足 条 件 

E(F(le,IVa)) < оо, (2.193) 
此 处 сМа 一 maxíe, d). WAFERS: 
G) # e, 的 分 布 (关于 原点 ) 对 称 , 则 


{М п elC) 为 一 收 伍 系统 。 (2.194) 


(1) # Ег, = 0,H. 
Хис) = ool), балэз) 
WI(2.194)]k3r. ЖР 为 不 小 于 的 最 小 整数 。 
(ш) Ж 
5; il GG) = On/ G0), (2.196) 
则 (2.194) 成 立 。 | 


Gv) 若 (2.194) 成 立 * 且 对 某 个 a> A 


v 一 de: log (n) 
E ó,, 29 8, CRURA e. 事实 上 有 
Ёа — В, o(Cn" G'(s)v(P | log eP PA}, a. s. (2.198) 
证 .由 条 件 (2.192) 可 知 : 
GC), y/G'(y)40, 34 уђоо. (2.199) 
由 (2.193)， 用 Borel-Canteli 引 理 ( 见 [28]，p. 228), ЖА SE HH: 
PCIe] < G(n) 对 充分 大 的 2) = 1, (2.200) 


» (2.197) 
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事实 上 :由 (2.193), 得 到 ХР(Е([е,| Va) 2 n) < оо. ERA 
F [OE E (2.192), BAA n 充分 大 对 ,有 {FClal Va) > n) = 
(F(]e]) o я} == {jel > 66)). 于 是 得 

EXPC|e,] > С(п)) = ZPC]&l > Gla) < eo, 
根据 Borel-Cantelli 5132, 4f Р(|г„| > G(x) 对 无 限 多 个 =” 成立) 
= 0, 这 就 证 明了 (2.200) 因此 ， 为 证 《2.194)， 只 需 证 明 对 任何 
fan El B 


Sal 2 16(Q/ ))е, Такао а. s. Wedk. (2.201) 


BA z< b HO. С(х) =a (AFERE), ЕЖ 
> a(n] G'(n)) E( ela, tacem) 


< X a(/e6) 3; eGRG-1« FC V) «D 


= X eGrG-1« Kal Va) < D Panlo) 


- Sas iG—1«rF(alVa)sj-o, (2202) 


n=1 j=l 


出 处 在 推导 中 使 用 了 sci, 因而 依 (2.199) 知 п/С°(п) < i] 
COG). 又 由 侵 定 (2.193) 知 


v 


У PGI Feal Va) S D 


< Id ECFClei Va)) < оо, 
由 (2.202) 式 ,根据 三 级 数 定 理 , 为 证 (2.201) 式 ,只 需 证 明 


D eal n GG) Е Се акон) WR. (2.203) 


Ж e 的 分 布 对 称 ,《2.203) 自 然 成 立 , 因 而 证 明了 Qi)。 为 证 (i), 利 
用 Ee, = 0, 得 


2. la, (A п | GG EC ellas iat) |] : 
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< $e (VT 66) Ela н> вә! 
< > G(j + DPG < FG ala m + 1) 


x УЗ lal GG) < oo. 
这 证 明了 (3)， 在 推导 中 使 用 了 (2.195); 存在 常数 M 
Y^ lec б? 


- Í+ | їз 
< (3) (3isiet0)" «ue + D. 
pe Dd Wl 


< Ў) офі 1 < ЕДМ) < D 
1=1 


x Mlle 1600) < e, 
ЖЕ të Fi T d (2.196) Hu 


У. n /С(а) 


< (> 5)“ > 11650)" ~ 00/60). 


Gv) 直接 由 定理 2.7 推出 定理 证 毕 . 
现 举 例 说 明定 理 2.12 的 应 用 . 


例 2.9 Ж ғє[1, 2), Bg F(z) — з", 3X85(2.192), (2.193) 
RE. WE Ee = 0, Ele|'« co 注意 到 GG) = х1, (2.190) 


可 推出 (2.197), B. (2.190) 中 的 3 SET. (2.197) 中 的 9. 


Q.197)8, 8 GR Z1, dic (2.190) 中 的 3 也 只 需要 > 1, EE 
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此 处 我 们 使 用 的 是 定理 2.12 PAY Gi). 为 此 需要 验证 (2.195) 成 
ir: 


Ld " 
>: HG -— >, jp? == O (2) 
#=1 = 


= 0/60). 

例 2.10 iX e, 服从 Ceuchy 4n. BER R dz BE [Cl + 
x), id F,(a) 一 xj(log (1 十 *))?。 易 见 对 任何 p> LRE 
《2.192) 和 (2.193) 成 立 。 由 于 e 的 分 布 关 于 原点 对 称 ， 定 理 2.12 
АЧС). 由 Fe) 的 形状 ,不 难 证 明 其 反 函 数 GG 满足 条 
H: 

GG) ~ (log (1 + x2), H х->оо, 
于 是 由 定理 2.12 的 人 iv) 得 到 如 下 的 有 趣 结 果 : 若 在 模型 (2.1) 中 ， 
{еу E. 有 Cauchy 分 布 ; 则 当 {e HARE AS Е 
sf = O(n (108) 2), (8 > 3) 
时 ,2,, 0 8, НЕЧА. 

最 后 ,我 们 给 出 定理 2.7 在 Le; 为 宽 平 稳 序 列 时 的 一 项 应 用 ， 
以 下 的 讨论 要 求 熟悉 文献 [81 初 读 时 可 了 略 去 . 

在 文献 174 中 证 明了 如 下 的 结果 ， 

定理 2.13” 设 在 模型 (2.1) 中 ,{ei} 为 均值 为 8 的 宽 平 稳 Gauss 
序列 ,满足 条 件 

D> (Еее < оо, (2.204) 


则 当 {ип == 0 B.A, 为 ñ. 的 强 相 合 估计 。 


可 议 证 明 , 这 样 一 个 随机 变量 序列 (е) RERO RTI 
布 的 标准 正 态 序列 fei} 所 产生 的 线性 过 程 , 即 


e= D) ceu (2.205) 


其 中 (с). NEB Co) 有 连续 的 谱 密度 ， 
在 (2.205) 中 , Ж (a) DREFI En =P < co 对 一 切 
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r> Ду ies; 1523 — SOE ЖОЧУ Жы UE LE BE 29 dr. 

由 定理 2.7 得 出 如 下 的 结果 , 它 改进 了 定理 2.13: 

定理 2.14 设 在 模型 (2.1) 中 ，{es} A (2.205) 的 形式 , 其 中 
{н} IREF Eu 一 о? 对 一 切 i:， 记 {eb} 的 谱 密 度 29 Ф, 
RJ. 

CO NRD s> 2 有 supElwl? < co, ЁН. Ф Ж: (0, 22) 
PRAES ЖЕ 1 6 FUE EB , B) 34 limvi 一 0 9}, Ên 20 8, 的 强 相合 估 
и. 

Gi) 若 存在 1 K 821-1, ж 


L d/(8)40 < co, 


vi = O(n log n) ^), 
DI ,, 20 В, ROO Ar (i. 

此 定理 由 下 面 的 引 理 及 定理 2.7 立 得 . 在 利用 定理 2.7 时 ,可 
(2.181) Ў aA CO H gam l, 7 一 1 2, 6 RGR 
е» = [n(log 5) 1775, n = 1,2, ++, Е 8" 21. 

引 理 2.14 121586. 设 Íz, 是 一 常数 列 . 

G) 如 果 supE lu. f^ < оо, Ж p> 2, 并 且 &(0) EO, 2=] 


内 的 本 质 上 确 界 有 限 ,那么 0e.) а-а. 
Gi) WFH rl, | 4'(0)408 < oo ,并 且 ENIMS 
1 


co ,那么 {gnent ERARA. 
VE. G) 的 证 明 参 看 18]. 为 证 Gi), 正如 [8] 所 指出 的 , #06 


r 4/(6)40 «o0 可 推出 > CjC; 3.8. KA, Ete, Et 
足 如 下 条 件 的 数列 : 


ce < оо, (2.206) 
1 


设 s.€/, 由 Hölder 不 等 ; 


2 langa tp 
1 


< (2: a (x lel) = оо. 


因此 对 En = GE y, п = 1,2, °` ° 《2.206) 成 立 ， 因此 > ÜsEnCs 


e. s. 
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第 三 章 ”误差 方差 舍 计 的 
大 样本 性 质 


考虑 一 般 的 线性 模型 
Yi= х8 t es jel, n e (3.1) 
诸 记号 的 意义 与 第 二 ТЕЕ 样 ,为 了 避免 重复 ,在 本 
章 中 我 们 常 假定 
ез» ĉis " 互 独立 ; 
| ш. Е Is р 1, 2,555, 0 «0 < co (70) 
误差 方差 中 是 模型 (3.1) 的 一 个 重要 参数 .在 假定 (3.2) 之 下 (或 
更 一 般 地 ,在 (е) 满足 GM 条 件 时 ), 人 们 常 通过 残 差 平方 和 去 估 
Wr o. BB 


Уе, — 2,» (3.3) 


n — Ұпј=1 


gi == 


Ж B, 为 8 的 LS 估计 . 它 可 以 表 为 
A illa 一 KAXAK XY w 


оз = 


= о, XXXV X, e» (3.4) 


n 


此 处 及 以 后 , 总 以 Trn УВЕ. (XX) 279 Х.Х. 的 任 一 广 
义 逆 , 如 所 周知 ，X。,(XsX。) X; 是 向 由 XX 的 列 向 量 张 成 的 空间 
的 投影 变换 矩阵 , 它 与 上 述 广义 道 的 选择 无 关 ， 又 rs е СХ), 
ІХ, 的 秩 . Bor, <р 内 当 +# 增 加 时 不 能 下 降 , REE + < 
:使 r, = r 对 充分 大 的 = 成立， 在 讨论 大 样本 问题 时 我 们 总 假 
定 = 充 分 大 ， 关 而 在 以 后 我 位 总 了 (3.4) 中 的 r, 为 r。(34) 式 中 
的 其 他 符号 的 益 义 , 见 (2.2) 式 . 

ЮЖ XXX) X. 是 投影 阵 ， 它 可 以 表 为 4s4。 的 形式 ， 
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其 中 1 
| Gan Cui2* * "' Qan ) 
4„=|- + rn 
“шү Слг `7" dnrn 
= 1, ж $— i, 
Gsjk0>1 777 (3.5) 
这 样 (3.4) 可 写 为 
1 r 


о} = =a 一 x saei) }- (3.6) 


i= “k= 


这 个 表达 式 是 我 们 以 后 讨论 的 出 发 点 ， 它 的 实质 是 把 方差 估计 o 
分 解 为 一 独立 变量 和 与 一 个 二 次 型 之 差 ,而 当 # 很 大 时 ,后 者 的 作 
RER 因而 ol 的 大 样本 性 质 ， 主 要 就 是 由 (3.6) 的 第 一 项 来 次 
X. 这 样 我 们 可 以 把 关于 独立 变量 和 的 丰富 理论 用 于 о 的 大 样 
本 性 质 的 研究 ， 当 然 , 这 个 原则 说 起 来 简单 , 但 在 处 理 (3.6) 的 二 
次 型 部 分 时 ,往往 带 来 很 困难 的 数学 问题 、 

本 章 的 内 容 是 讨论 o 4 n 一 co 时 的 渐 近 性 质 ，83.1 讨论 它 
作为 中 的 估计 的 强 、 弱 相合 性 .在 这 里 我 们 都 找到 了 充分 必要 条 
件 ，$3.2 讨论 ol 经 过 标准 化 后 ,其 分 布 收敛 于 标准 正 态 分 布 的 速 
度 .我 们 既 讨 论 了 一 致 性 收 伊 速度 ,也 讨论 了 非 一 致 性 收敛 速度 . 
两 种 情况 下 都 达到 了 比较 理想 的 结果 。 我 们 也 讨论 了 在 а 的 标 
准 化 


满足 条 件 


81 = (02 — PV varlo?) (3.7) 
rh. var(o3) 以 其 估计 值 代替 的 情况 。 在 这 里 我 们 基本 上 得 到 了 
一 个 彻底 的 结果 ， $3.3 讨论 02 的 分 布 的 渐 近 展开 。 此 问题 难度 
很 大 ,在 此 介绍 的 结果 还 是 初步 的 ， 有 关 历 史 方 面 的 介绍 ,将 结合 
所 讨论 的 问题 进行 ,不 先 在 此 作 全 面 叙 述 了 ， 


#31 os 的 相合 性 


XT os 的 弱 根 合 问 题 , 在 数学 上 困难 不 大 .看 来 这 个 问题 在 
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相当 一 个 时 期 内 没有 受到 注意 ，1979 年 陈 希 播 在 11 中 得 出 了 充 
ESAME. AT ol 的 强 相合 问题 。Gleser 1965 年 在 [2] 中 ,在 e» 

Coen cc 满足 条 件 (3.2) 且 为 同 分 布 ， 及 试验 点 列 C] 满足 一 定 条 
件 的 情况 下 ,证 明了 ci 的 强 相合 性 ，1966 年 ， 他 在 [3 中 改进 了 
自己 的 结果 , 即 取消 了 对 (zY 的 要 求 。 这 就 彻底 解决 了 同 分 布 情 
况 的 问题 . 1979 年 , 陈 希 医 在 L1] 中 考虑 了 非 同 分 布 的 情况 ( 即 只 
RE (e) 满足 (3.2))。 提 出 了 o3 强 相 合 性 的 必要 条 件 与 充分 条 
件 。 这 项 工作 中 有 -一 点 错误 .1981 年 , 赵 林 城 发 现 和 改正 了 这 个 
SLEET оз 强 相 合 性 的 充 要 条 件 , 见 [1]. 又 在 [5] 中 , 陈 希 
瑞 考 虑 了 多 元 线性 模型 的 情况 . 除 此 之 外 ， 研 究 过 сз 根 合 性 的 ， 
还 有 T. Klock， 但 他 看 来 不 了 解 Gleser 的 工作 ,而 在 1972 年 在 
Gleser 同样 的 条 件 下 ,得 到 了 较 弱 的 结果 . 

(—) ei 的 弱 相 合 性 

定理 3.1 设 (ea) 满足 条 件 (3.2)。 并 以 Fa 记 ex 的 分 布 。 册 
ci 为 一 的 绊 相 合 估计 的 充 要 条 件 是 以 下 两 式 同时 成 立 : 


1 з 
im. F, = 3.8 
nao 7 3 И ЖКын Üs (3.8) 
1 7 
і = 
жеу 22 Ixl ev z dF. <= 0. (3.9) 


WE. 由 关于 Ce) 之 假定 及 (3.5) 和 (3.6) 式 ,得 
s| -r (>: san) | ~ = с? > 0, 
当 sco. HA 


рар (нау 2 59. (3.10) 
由 (3.6) 和 (3.10), 知 оз НАЗЕ HOS 
53 (4 — 0) 50. (з11) 


将 吉 典 大 数 定律 ( 见 定 理 1.12) 应 用 于 此 处 的 特殊 情况 (主要 是 注 
意 е} >0, 因而 ej — Ф р> — — P), Bi 9, (3. 11) 等 价 于 以 下 三 式 
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lm |, „уктат PAG 一 0， (3.12) 
"9.1 yl y" + 

1 " 
im |, el nist De т Jd F (x) = 0, (3.13) 
-» kairt: ns? 

1 n 
imad], i sa (z — o? Yd Fí(x) = 0. (3.14) 
g k=1 х я. z 


往 证 (3.12) 一 (3.14) 与 (3.8)--(3.9) 等 价 。 先 设 后 岩 成 立 , 由 (3.8》 
式 知 | 
lim 


in ЭЗ s BP Ga) 


ki I 
< im | 4 ЕС) = 0, 


aee k=: 
由 此 得 (3.12)。 由 (3.12) 及 Ee} = 0, k= 1,2, ++, A (3.13) 
等 价 于 


imc = x FíGO Ex 0, (3.15) 
而 这 当然 是 (3.8) 的 推论 。 现 证 (3.14)， 为 此 只 需 证 
jm >) ЕС) = 0, (3.16) 
PEU: PETI [PS PIE 


以 姑 记 不 小 于 z + о? 的 最 小 整数 , 则 (3.16) 式 极限 号 下 的 量 不 超 
过 
ту 1 2 š 
(z) эт шуа 2 G), 


k-l 
根据 (3.9), 此 式 当 m oo 时 趋 于 0， 
现 设 (3.12) 一 (3.14)。 id m = [n — ']([a] 记 不 超过 4 的 
Ak). LEE (3.12) 和 (3.13) 推出 (3,15)， 因 而 ， 车 记 
L = [1 + 021, ШЇ 


т { = 


img ; PI ж җе tera ord. 


因此 ,再 与 关系 式 
1 "5 


3 _x?dF 
i mig yes Б 5С) 


<li roo, M п —>со 
1 


结合 , 即 得 (3.8)， 最 后 ,由 (3.14) 显 然 推 出 (3.16), 从 而 推出 (3.9). 
外 此 定理 易 得 出 两 个 便于 验证 的 完 分 条 件 : 
ЖЗЛ (е) 满足 (3.2), 且 


im Í supl ZIRON = 0, 3.17) 
Co 人 大 Ге 


Ш oz 为 到 的 弱 相 合 估 计 . 
证 。 由 (3.17) 显 然 推出 (3.8)， 又 因 
23|. пеи 


n" "c т 


s > > Wi е кР) 


k=] m-i 


252: [auno 
给 定 s> 0. Hg c 充分 大 , 臻 
mF, (z) < e/2, k= 10,2, 7s. 


x'dFíG), (3.18) 


NO 
则 由 《3.18) 得 知 , 当 z 22 2eo' [e 时 ,有 
1728 7 
| ERE) 
< 1 (#-/2+ nes) < e. 


这 证 明了 (3.9) 式 成 立 . 
条 件 (3.17) 有 趣 之 处 在 于 , 它 与 的 极限 分 布 问题 有 密切 关 
系 ( 参 看 [61,171)， 
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系 32 设 {et 满 足 条 件 (3.2): 且 存在 бє (0,2), 
lim „Ут E| ej t? = 0. 
ЖҮР к= 


lil] ez 为 中 的 弱 相 合 估计 . 

证 明 容 易 , 从 略 . 

例 3.1 ЖЭБ oi 不 为 弱 相 合 的 例子 .为 此 令 eres 
相互 独立 ,而 с, 的 分 布 为 


Plea = n + 1) = Ple, = —n—1) = HC — PCen = 0)) 
кери NS 
Жп + 1р" 
ИЮ (3.8) ЗУ. 
CES 从 定理 3.1 的 证 明 过 程 中 看 出 , 该 定理 可 作 如 下 的 推 
I 
€ 3.1 $ 13 Eis ёзу 7 * 独立 ,而 supE ei < oo , Mj 34 OO 
时 
1 п 
元 > (е — Ее) 0 
&=1 


的 充 要 条 件 为 (3.8) 和 (3.9) 同 时 成 立 . - 

(=) o; 的 强 相 合 性 ” 设 为 任 一 随机 变量 。 作 一 随机 变量 
zE z E) z 独立 同 分布 , 则 z 一 xz 称 为 的 对 称 化 ,并 记 为 z*. 
又 以 aD іа = ВОН (УЗ. 

X38 3.2. iiie.) 满足 条 件 (3.2), 又 记 

20+ 


бее а: 一 0，1，2，. (3.19) 
ДЇ o; 是 斑 的 强 相 合 估计 的 充 要 条 件 是 : (3.8),(3.9), 以 及 

PUZ 2 в) < оо RHE s > 0 (3.20) 
三 条件 同时 成 立 ,此 处 ， UX 为 U, 的 对 称 化 ， 


+ 168 = 


定理 的 证 阴 依 赖 下 面 几 个 引 理 . 
引 型 34 3 (eu) 满足 条 件 (3.2), 且 os 29 o^ 的 强 相合 估计 ， 


则 | | 
mrs ek = c, a. s. (3.21) 
>29 k=, 

ШЕ, 将 (3.6) 式 改写 为 
oo R, +t ——— o — T, (3.22) 
一 了 ñ — r : 


其 中 
de 3 b ati 
k=1 


1 r я а 
T, = 22.2) (2, ане) ” (3.23) 
№ n 2r WWA 
ET, = — — P < a![2n, 
g — ғ 


于 是 对 任何 г> 0 有 > P(T > e) < oo 因而 由 Bore]-Cantelli 
ki 

引 理 , 知 lim Tat == Ü, 2, S., 政 由 引 理 假定 及 (3.22) 式 ,得 
lim Rt = 0, a. s. (3.24) 


ја D, = 2*(U, — P), О, 由 (3.19) 定 义 . 则 南 (3.24), 有 
lim D,/2^ = Ü, а. s. 


因而 ( 依 定理 1.19) 


Bm (D, 一 u(D4))/2* = 0, a. s. (3.25) 
由 第 一 章 定 理 1.20 ,得 
lim(R, 一 AKCRe)) = 9, а. s. (3.26) 


因为 假定 了 s, 为 c 的 强 相合 估计 ， 故 也 是 弱 祖 合 估 计 。 由 定 
理 3.1 的 证 明知 ,此 时 《3.11) 式 成 立 ， 以 此 与 (3.26) 结合 ， 即 得 
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Emw(R。) 一 0， 由 此 反 (3.26) 即 得 (3.21)， 引 起 证 毕 . 
引 理 3.2 ¿ze 满足 条 件 : 相互 独立 :而且 $ Есі < 

М < co, k=1,2, °. 则 当 5 —co 时 | 
RAFS СА 一 50->0 as G27) 


的 充 要 条 件 是 (3.8),(3.9) 与 (3,20) 三 式 同时 成 立 * 且 这 时 也 有 
УЛО SV ks) < оо, MERI 6770. (3.28) 
k-i 


WE. DL RI јо R, 的 对 称 化 , 则 ( 见 定理 1.19) R, 一 0, a. s. 的 
充 要 条 件 是 ，R* 一 0， ass В p(Rs) 一 0， 另 一 方面 , 依 第 一 
章 定理 1.20 知 ，R# 一 0，a. s， 当 县 仅 当 (3.20) ARY. HET 


知 , 从 R,— 0，a. s、 可 推出 (3.20)， 又 由 (3.27) А R, 0, ik 
由 注 3.1 知 (3.8) 和 (3.9) 成 立 ， 这 证 明了 条 件 的 必要 性 。 反 过 来 ， 
设 (3.8),(3.9) 和 (3.20) 都 成 立 ， 则 如 上 述 R$ 一 0，a.s.， 又 由 注 
3.11 R,0, it a(R) 一 0, 因 而 R, 一 0，a.s.。 这 证 明了 引 理 
的 第 一 部 分 。 若 (3.27) 式 成 立 , 则 有 

lim ez [п 一 Шт (е5 — b. )in 


п — 1 


== im( R, — ~ 
L n 


в.) = 0, а. $. 


由 此 式 及 (eu 的 独立 人 性。 用 Borel-Cantelli 引 理 , Н (3.28), 5 
mb. 
引 理 3.8 设 а, en oee 相互 独立 * 且 
Ee, = 0, Ее < M< со, k=1, 2, t, 


且 对 某 个 常数 。 > 2» 有 


ре > hE) < оо, 对 一 切 s> 0. (3.29) 
k-i 


又 设 (o: k= 1; t. n= 1, 2, eel 为 一 组 常数 , 满足 条 
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件 > wx WA 
kw 


э 
lim T, &limz* >: askek = 0, а. $. (3.30) 
ЇЕ. 有 


Ti = 27 Ý ше} +> У) шс 
^e Pk 
AV, + W.. (3.31) 
由 (3.29) 式 ,用 Borel-Cantelli 引 理 ,得 


limn ?*e2 = 0, a. s. 
Ne 


又 当 帮 固定 时 有 limn k kane = 0, В. 


> n^ Kal, Уа < 1. 
k-1 3 k=1 
Hi Toeplitz 引 理 ( 见 [81]，P. 238) ,得 
lim V, 一 lim $7 n? KaL (k ek) = 0, а.з. (3.32) 
nen a>? k= i 
另 一 方面 ,有 
EW} = 2p“ D akay Pe} Ее} = 2M?)n "^, 
P*k 


由 .>1⁄4, 知 
XP. >а) < =, 对 任何 & > 0. 


这 证 明了 lim W,—0, a.s.. 与 (3.32) 结 合 ,根据 (3.31), 得 (3.30). 


引 理 证 毕 。 

定理 3.2 的 证 明 ， 党 设 оз 为 c? 的 强 相合 估计 . 则 依 引 理 
3.1, #1(3.21) 式 成 立 。 依 引 理 32, 知 条 件 人 3.8)。(3.97 和 (3.20) 
同时 成 立 ， 这 证 明了 必要 性 部 分 。 ` 

现 设 (3.8),(3.9) 和 (3.20) 同 时 成 立 ， 则 由 引 理 3,2, 知 (3.28) 


“111, 


RY. 国 而 (3.29) 式 当 a 一 RE. 依 引 理 3.3, 并 注意 到 
(3.5), 知 


im 7-3 бајке = 0; а. 5.» 了 一 1, - ` ‘sr, (3.33) 


seoa ny 


#5шщ(3.27)ҖЖ 
lim 一 зү; = 02, a.s. (3.34) 


H1(3.6), (3.33) 90(3.34), #02 为 到 的 强 相 合 估计 . 这 证 明了 充 
分 性 部 分 ,定理 证 毕 . 

X33 设 coen 满足 条 件 (3.2) 且 为 同 分 布 , WJ oz 为 中 
的 强 相合 估计 . 

如 在 前 面 提 到 的 ， 这 个 结果 是 Gleser 最 先 在 [31 中 证 明 的 . 
现在 它 不 难 由 定理 3.2 推出 .事实 上 ， 由 关于 er e …- 的 假定 
很 容易 证 明 (3.8) 和 (3.9) 成 立 ( 也 可 以 这 样 推 : 由 关于 ci 之 假定 
推出 (3.11), 再 利用 定理 3.1 推出 (3.8) 和 (3.9))， 至 于 (3.20), SB 
ват Жж (Ë) 独立 同 分 有 ， 均 值 为 0， 则 当 — co 时 

„= (S £0, а. з. dB T, -X Eiln. 由 大 数 律 知 


T,— 90, a.s. 但 
n 一 2T, — Tt, 

AMAR пе 0, a.s. Щщ К» оо, 

注 3.2 由 定理 证 明 过 程 看 出 ,与 (3.8),(3.9) 一 样 , (3.28) 也 
Ж о» 强 相合 性 之 一 必要 条 件 . 作者 之 一 由 于 论证 上 的 一 处 琉 忽 ， 
在 [11 中 误 认 为 这 条 件 与 (3.8) 积 (3.9) 结 合 , 能 构成 4 强 相合 性 的 
一 组 充分 条 件 . 果真 如 此 , 则 条 件 就 简化 得 多 了 ， 然而, 下面 的 反 
例 说 明了 : 这 是 不 对 的 . 

例 3.2 设 ee 相互 独立 ,而 e, 的 分 布 为 


em a) m az) 
log log К log logs 
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一 dog legs» 
2n 
P(e, == 0) = 1 — log lgz/n, n> 16, 
H en~ NCD, 1), 4 r1 n 15, ЈА £ECS.8). (3.9) 103.28) 
显然 都 成 立 . 记 6, = е» 一 1， 则 !&„| < log log, 而 


ЕЁ! = pa — 1 = —“ _ — 1 >> 16 
š, т log logs PA log og gn C neo 


В M > 0, & ‚ 
5-7 zi ГА 2 Eš) ) 


> Sa(—72" / Tm ш 2) 


- > exp ( — log log 2***) 
kc . 
>м 2, (k + 1): = co, 
m" 


根据 第 一 章 定理 1.18, 知 一 3 < 不 以 概率 1 收敛 于 Eel 的 公 


共 值 , 即 1。 根 据 引 理 3.1, 知 o2 AE а? 的 强 相合 估计 ， 
注 3.3 Y. S. Chow Æ [9] 中 证 明了 如 下 的 结果 : Ж а, 
e "УАУ, —0, Ee} < оо, X. laid 满足 引 理 3.3 


中 的 条 件 ， 则 lim "Z S аце 0, а. s， 易 见 这 结果 是 引 理 


3.33 a = 1/2 Mo at 

(=) ei КЕЖЕ ARERR ex 的 二 阶 矩 存 在 
时 ,我 们 无 法 建立 о — т 以 任何 确定 的 速度 收 你 于 0. 要 建立 
这 种 速度 ,必须 假定 ел 有 更 高 阶 的 和 抢 存 在 。 本 眉 就 来 讨论 这 个 问 
Е. 

假定 (e 满足 条 件 (3.2)， 记 


qG) 一 supPCl exl > x), 0 < x < co, (3.35) 
假定 存在 1€ (1, 2), Ж : 
| ү х®7'е4(ж)ах < оо, (3.36) 
可 以 证 明 : 这 个 条 件 等 价 于 存在 随机 变量 e, S Ele” < co, H 
jel} ler] k= 1,2, e (参看 $23). 
定理 3.3 在 上 述 假定 下 ,有 | 
ima "(0$ — o?) = D, a.s. (3.37) 


定理 的 证 明基 于 下 面 的 引 理 .我们 把 这 个 引 理 写 成 较为 一 般 
的 形式 . 

引 理 3.4 а, n. 5 Har, 对 某 个 gE (0, 1}, 
Eje| < М < со, Kk—1,2,... X34 47 1/2 Kj, Ee, = 
Ee 0-0. KRHA а> 0,9 


S KI > дев) < co， 对 一 切 = > 0. (3.38) 
LES! 


又 设 Ub. K71,2.,*::-, n 7—1,2, з} 为 一 组 实 常数 , 满足 
Ж. 对 某 个 数 4220 和 ac>>0， 有 


[2.1 < 4 k= 1, 2,7, n= l, 2, °, (3.39) 


bA Dlia < Ап", n=l, 2,5, (3.40) 
2: z 


ШЕЕ n, 级 数 T, = УЗ Бек а.з. й, B 
lim T, = 0, а. $. (3.41) 


"8 


证 ， 如 所 周知 ( 见 定理 1.225,78 Eo £7 相互 独立 , 且 对 基 
个 se(0;2] 有 D, EIE, |? < co His a < 1 А 65. a+ а. Ë 


#› У 2221 时 5 (5, 一 Eš,) a.s. Ш. Ba 


би4+ 


rm X жи 


У lba Ele] < co, 
х= 


fg 0-292, 日 当 1&2 所 2 时 还 有 Бе = Eem +++ = 
О, T, а. s. Ш. 

不 失 普 记性 可 设 所 有 的 5,220. Хі, 以 +04) WRA 
所 售 元 素 个 数 ,而 以 54) 记 其 示人 性 函数 . HX N = [2/e-t 1], 
由 (3.38), 知 存在 一 串 ex40, 使 


УРО > в/м) < o. (3.42) 


故 由 Borel-Cantelli 引 理 , 知 

PK(iek| > && " /NA, і. о.) = 0, 
此 处 及 雇 下 以 {4,, 1. 0.) XX “Ab 4 e 发 生 无 穷 多 个 ”这 一 
事件 。 由 此 可 知 对 一 著 £27 0, 有 | 


> TRO > sk /N 4) < 00, a.s. (3.43) 
= Р 
定义 
eg m eil (e > 84A INA), 了 了。 一 > Бек» 
Mm Gan mato, TY 一 еш. P (3.44) 
k-1 
esk m ek — ek — emo T; -> bote. 


对 任 一 固定 的 #， 当 Ts(o) — У Баео) Be REIS AY DO 
k-i 


天 将 有 eo) e Co). AmA Т, а. s. Ш, A Ta а. з. Ш 
Ж. 又 由 下 面 的 (3.457 式 知 Tz 29 a. s. Uc, Т," EE a. s Y 
ж. 

#4 4 = 2/3 Rgs WQ 0 < ¿=< 1/2 REME. WEER 
数 4. xn х i Ж. ; 


EAM. 1124 = A'n Ed" =Í, 2, `°, 


ЕҢ Hilder 不 等 式 ,得 
(24'—1)/27' 
т: < |; е [e nme (а> dt xit) 


— 0, a.s. (3.45) 
Ф Ya 255,65, Hl Уш, < 1, 824 1/2 < д1 EY, = 
0. (ku 
1 + 2|Y,,|*” 0 < 1/2; 
exp( Yng) <Í | | > 当 q < / 
1 + Y, YI, 当 1/2 «9g «1 


A 
Eexp(Y,4) <1 + 2E|Y IS 
< ехр(2Е|Ү,.|), 05 x1. (3.46) 
因而 出 Fatou 引 理 ,(3.40) 式 及 Elen < M, # 
Eexp(ln Tn) < inintEexp( 55 Ya ) 


k=t 


R 
== liminf П Eexp(Y 44) 
E T 
R 
*xdminf П exp QE | Yn O 
R+» kl] 


: Е 
< uminfəp[20 $ Уьч T 
< liminfexp (2п“ a 
此 处 C> 0 为 常数 对 任 给 8 > 0 有 
PT, = e) < ехр(—»°^евуЁЕ exp(a" T?) 
< cexp( —2" 8), 
因而 


> PCT 2 в) < оо, 


з=] 
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ЖЕШ Borel-Cantelli арар 
PllimsupTs > в) «РОТА >e, i. о.) = 0. 
AA é > 0 是 任 给 和 的 , 故 P(UmsupT, > 0) = 0, Bi 
imsupT2 < Ü, a.s. (3.47) 
i570. RERS R, 使 ex < е/2, 4 4 2 К, 由 (3.40) 
式 , 知 存在 m» f n Z9 п, 时 > 有 


к K 
- Е 
D bareak < (ty us е <дв/2, (3.48) 
х=] k=1 
对 я = figs 
Da = (k:k Ri Фе > п 74]. (3.49) 


则 由 T, a. s. 90,41 dECD.) < co, а. s. 我 们 有 
>) bac < У) AKEk {МА < e3ECD,) [2N. 


k>R АЕР, 
为 楼 使 bae > 612， 必 须 dE (D) > N， 故 我 们 有 
RPR 
PTI > в) < HS bach! 22 e/2) 
k>R 
«POSSE М EPRk > R, Ë |e,| > bin) 


< (2) P(L eu] 22 bane) j 
< (> | 5,4 |In E | e,|?* y 


=< (AMn ун — CAM)Nn "I2, (3.50) 
由 六 的 取 法 , 知 aN/2 > 1. 故 


,PT 22 в) < оо, HER £ > 0, (3.51) 
azl 
同上 可 得 
LmsupTs S< 0, a. s. (3.52) 
由 (3.45),(3.47) 和 (3.52), 得 
limsupT, < 0, a. s. (3.53) 
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将 er RR en EAA 
lmintT, Z 0, a. s. (3.54) 


由 (3.53》 和 (3.54) 其 得 (3.417。 引 理 证 毕 ， 
系 3.4 设 fis бду 777 相互 独立 ， HRT A € (0, 1] 有 


sup E| el” < M < co, 且 当 ae (>, 1] 时 za ~ Be 一 жү 
0. X 


Dal > Phe) < оо, 对 任何 6 之 0。 (3.55) 


则 对 满足 条 件 > аз < 1 的 常数 组 (anik = 1-7-0 n. n=l, 
ChA 


к S anek — Ü, a.s. 34 n — 00, (3.56) 
К=1 

Ж 3.5 设 fis € cc: 相互 独立 ， Ес, == Es, = ++ = 0, 

шрЁе <M, B. (3.55) HRD 12 0 RA. 则 对 满足 条 性 


У) а 1 的 常数 组 {artx}，(3.56) 式 成 立 。 


k=1 


易 见 , 引 理 3.3 ER 3.5 的 特例 ， 
定理 3.3 的 证 明 . 依 定理 1.17 的 说 明 , 及 本 定理 的 假定 ,得 


lima 80] (22 — 0?) = Ü, а. 5. (3.57) 


ld gala) 一 Ph Jel > 2. 则 有 glr) sa). (3.36), 
Ele” < np a Gode < i |° xe (x dr 


= M < co. 
ВИСЕ. е, 致 Ele|? < со, В lel lex А]—Ю) 4. 故 对 
ШЕ e> 0 = 


> PCLet| > ке) 
k= 
- 118* 


< S Pet > д2) 
k=1 

= >` PGe" < [e[? < (; + 12825 
k=l = 


= D jPGs* < |e|2: « GHI) 


Pel 
< ега, < co, (3.58) 
因而 系 3.5 可 用 .得 | 
ғ ы š 2 
lmg 353 — =“ 0, a.s. (3.59) 


j=1 `k=1 


由 《3.56),(3.57) 和 (3.59) 即 得 (3.37)。 定 理 证 毕 。 

注 3.4 o 的 重 对 数 律 . 

当 4 二 2 时 ,定理 3.3 的 结论 已 不 再 成 立 。， 这 时 , 一 o 的 
收 钱 速度 由 下 述 重 对 数 律 刻 划 : 

定理 3.4 设 esen WERC.) H 


M << со, 
9 


此 处 g(x) 由 (3.35) 定义 ， 又 记 В, 一 2  var(e1), R ik 


k=1 
limintB,ls > 0. (3.60) 
则 有 | 
Bas s C c: ENT PNEU (3.61) 
">= 2B, log log B, 
imin CL Mond. à) ml a. s. (3.62) 


">= A/2B, log log B, 
定理 3.5 设 eis es 75 满足 条 忻 (3.2). 又 记 а; = le} g 
e x }==®1,52, + 则 在 条 件 (3.607 和 


limsup zy: E(Zi | log zi *^) < со, 对 其 个 8 > 0 
ез k=1 
成 立时 (3.61) 和 (3.627 也 成 立 。 
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此 处 我 们 不 去 证 明 这 两 个 定理 了 。， 有 兴趣 的 读者 可 参看 
[10], 


532 一致 性 收 伍 速度 (D 


(一 ) 引言 和 主要 结果 ” 设 在 线性 模型 (3.1) 中 ，{c4} 满足 条 
件 (3.2). 通 过 (3.6) 各 (3.7) 定义 名 .以 Ga їп д» 的 分 布 函 数 , 又 以 
9 记 标准 正 坊 分 布 函数 。 以 下 , 对 任 一 定义 在 (一 co，co) 上 的 函 
ЖОН, АН! 记 рін). 


从 (3.6) 式 出 发 ,在 很 一 般 的 候 定 之 下 , 不 难 证 明 дь 的 渐 近 正 


RHE, RH 
llG, — Ф| — 0, 34 2 — оо, (3.63) 


远 为 困难 的 是 研究 1С, 一 中 收敛 于 0 的 速度 .从 关于 独立 和 的 
Ze URBS Berry-Esseen 理论 ， 知 道 所 能 期 望 的 最 好 结果 是 Обл), 
最 早 对 这 个 问题 作出 重大 贡献 的 是 我 国 著名 统计 学 家 许 宝 驿 教 
授 ， 他 于 1945 年 在 [11j 中 考虑 了 一 般 模 型 (3.1) 当 p= 1, z, = 


а= 一 1 的 特例 (这 时 оз 变 为 通常 的 样本 方差 2) 


Y.) —1)). 证 明了 如 下 的 结果 : 车 {cx} 为 独立 同 分 布 ， 
Ee, = 0, 0< Бе = а? < оо, Кеў < оо R. varle = Eet— 
o > 0, 则 上 面 提 到 的 llG, 一 Ф| 以 OGA ЖЕР 0. 在 
随机 误差 序列 独立 同 分 布 的 情况 下 , 许 教授 在 最 低 限度 的 条 件 之 
下 达到 了 最 佳 的 数量 级 。 他 的 这 项 成 果 就 产生 在 关于 独 立 和 的 
Derry-Esseen 理论 建立 之 后 不 入。 这 是 关于 非 独立 和 依 分 布 收 全 
速度 方面 的 第 一 个 重要 结果 . 

此 后 三 十 余年 ， 这 个 同 题 没有 什么 进展 ， 直到 1979 年 ， 
Schmidt 研究 了 一 般 情形 。 他 在 [12] 中 得 出 了 如 下 的 结果 : 设 
Le Vir dt. Ee 一 0，0 < Ва о < 9， 又 假定 存在 整 
Ë m= 3,8 Ele? < оо, MJ 


* [20 * 


I Ga TES eli == O(n- "аттуу, 
х НАА АЕНА. 0, 即使 假定 e 有 任 
意 阶 矩 ,也 还 达 不 到 0a). 

KAME 1131 中 研究 了 这 个 问题 ,得 到 了 基本 的 解决 :在 
{ex} 独立 同 分 布 的 情况 ,他 在 许 教授 所 作 的 同样 假定 之 下 ,证 明了 
lG, 一 e| = oG. 知 不 假定 同 分 布 ， 则 为 达到 这 个 数量 级 ， 
还 需要 对 {cx} 的 分 布 或 试验 点 列 加 上 某 种 条 件 。 后 来 , 白 志 东 、 赵 
林 城 等 在 [14] 中 取消 了 这 种 附加 条 件 ， 并 将 结果 写 为 较 一 般 的 形 
式 ,从 而 彻底 地 解决 了 这 个 问题 。 主 要 定理 如 下 : m 

定理 3.6 ” 设 在 一 般 线性 模型 (3.1) m, £e) 满足 条 件 (3.2)。 
Xl z 为 定义 在 (一 co, co) 上 的 非 负 偶 函 数 ,使 当 * 之 0 时 , gl) 
和 x/g(z) 都 是 非 降 的 ， 而 img) = co. 又 假定 存在 常数 


D, < со # D, > 0, S 


x2 Eleg) < D 1—8] s, — (3.64) 


I$ # >D, 对 一 切 (3.65) 
此 处 | 
4} = var(ei) = Ее} — а". (3.66) 
用 (3.7) 定 义 名 ,并 以 G, 记 其 分 布 函数 ,出 有 
lG, — el ~ oG /g )). (3.67) 
Е 3.5. 4 g(x) = Jel 时 ,条 件 (3.64) 转 化 为 
25) Ec? =< D 对 一 切 а. (3.68) 
j=1 


而 (3.67) 转 化 为 Berry-Esseen 界限 
16, — Ф| = о(1//»). (з.69) 
(=) 落 干 引 理 ”定理 3.6 的 证 明 很 复杂 .为 清楚 计 , 我们 将 
证 明 中 的 菜 些 部 分 以 引 理 的 形式 提出 来 ， 又 我 们 将 以 C 记 一 与 
无 关 的 常数 ,每 次 出 现 : 即 使 在 同一 式 内 ,也 可 取 不 同 的 值 . 又 , 记 
ад, 


E 专用 于 一 1 . 


“本 理 3.5 Ur(e) 满 是 条 件 (3.2),(3.64) 和 (3.65)， 定 义 ` 


г,; = 1013) = т), En д4 — Еф, ` 
es; = vB); pM ЕС)» ， 


E C j=l, -— 


nB} = Xa | asa "T N 


j=1 j-1 


财 存在 与 ”无关 的 、 大 于 0 的 常数 Ds Dis bp i= 1, 2。3， 使 当 


充分 大 时 有 . 

TE ú B} < Ру» 
1B3 — Bal < Gn) . 
BID, а < D, 

且 集合 


4, = {ў ся; = Бу» ani < Ваз j= doti. n] 
EDAH bn 个 元 素 . š 
证 。 首先 ,由 对 g 的 假定 , 易 知 g(1) > 0. 


1 < 1 — 
Bi < У) Ес} — 2 EC < 19) 
1 1 


+1 кг >1 


(3.70) 
(3.71) 


— (342) 


(3.73) 


<1+ (52 EGG) <1 + rod 


这 证 明了 (3.70) 式 , DE Еу 18 е; UA RS 
183 — Bil 


«52,04 — Eet) 


十 二 A e — Ee) 


+ 1299 


=. 


1 ” 
n 


| an ыл 4169) 
20 < à 
ке 2; ЕТ xq F (x) 


< 7% эё ЕС(е} gCei 2) 


IN => ЕС gle} )) 


<DA + 20) an). 
这 证 明了 (3.71) 式 .3.72) 的 第 一 式 由 (3.71) 推出 , 为 证 后 一 式 ， 


注意 
| (8 > ER LE & =< el; i 


(4 < E8;) ==> |E,| < Её s o. 
КЕН g 的 性 质 得 


12, 7 
а = VP, EGGS > ES) 
bu us | 
+ Ў) EGUgG4UU < ES)] 
j=l . 


1. оз, 
< > Б{е}к(е})} + - > | oge) 
im = 


=. D, +- o'g(o). 
这 证 明了 (3.72) 的 第 二 式 . 
为 证 最 后 一 结论 : 令 
Am = {]:1 < пся > 0112), 
并 记 „= (ЛА). WA » 充分 大 时 有 


<a <+ + эз! 


[yum 


«Dial EGRE < a)) 


um VIE 
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UM 
T ZOPA ЕСЕ hg En) ) 


< 05 [2 + а,ә + DÌ fgla). 
因为 іш (а) = 00， 由 上 式 知 存在 6,20. 使 „С> en. 男 一 


方面 ,由 (3.72) 式 ,对 任 给 的 e, > 0, 当 充分 大 时 有 #(А„,) 22 
(1 一 &)s, Kip | 
Аһ 一 (jio; Di [ез j= 1,сссут}. 
取 8 一 sy73， 即 知 当 于 充分 大 时 :有 _ 
H CAR Ana) => вүп{2. 

取 bm 2/2, = 05 12, Ь, 一 3DI/s。 即 得 引 理 的 最 后 一 个 结 

2138 3.6 沿用 引 理 3.5 的 符号 和 条 件 。 Ve lesu] 为 一 组 常 
数 ,满足 条 件 


> au =l, u=]; 37, n= 1,2,- 5. (3.74) 


则 存在 与 和 {an} 无关 的 常数 上 , EAn 充分 大 时 有 ЗСА, П 
Н,) > bin/2. Ж A, M b, ES IR. 3.5 中 已 有 定义 :而 
Н, = {va < Lja, и = 1,557, r). (3.75) 
WE. ва (3.74) ЖАП, ЯШ R 20 和 weil, cr). 使 
aj, > Rin 的 足 标 ” 的 个 数 , 不 超过 n/R. Ж 
Ж{0: 存在 uell, csr} 使 а, > Rin, 910,5. 
= гп/Е. | | I 
E R = 2,6, = L, 则 得 间 (4s 站 H,) 2 6,812. ЗІНЕ, 
2]: 3.7. REH 3.6 中 的 条 件 成 立 , 且 沿 用 前 面 的 记号 ， 以 
Paj i £v; 的 特征 函数 ， 则 存在 与 了 无 关 的 常数 $00 АР 0, 


使 当 || ag QV. п) 时 ,对 所 有 的 je 4 有 
|p; Gf п B,)| < exn(—1 fn). (3.76) 
d. 8 |ы] < Vn, ТЕС) «v ^/g( n). X 
t 124 9 


因 当 je À, 时 ,有 oc bh. s< b 及 Boo DE 
| EexpGirE,;/4/ n B.) — 1 + n2;J2nB21 
< [PE] En AB; 
` < l| Eg GS D Ing CV n BÀ 
< b,|#|*/ Dang Qf n ). 
取 а = h/AD, »— b / Р,/4Ь,, Ч |1 ag n) 时 有 
е m B,)| < 1—98 20 Bi bL PI DIPogQ n) 
| < — b,P/2Dm + b, ]AD,n I 
=] аја < ехр(—Ал/[п). 
jKUEBH T (3.76) X. 
引 理 3.8 Ен 3.6 的 条 件 成 立 ， 
- x Ed nB, E ^ 07 (3.77) 


其 特征 函数 记 为 所. 则 存在 与 + 无关 的 n> 0， 使 当 n 充分 大 时 
有 . 2 * 


Juss: 
< Gig (Va). (3.78) 


б) 一 éxp(—2]2) [ds | 


[4 Е: ` L ul n Bno 
j=1 


L= > zi  /(> EB). 
3EDA 2, 30 2, 的 特征 函数 ， 则 由 第 一 章 定理 1.32 知 
1,6) 一 expC —70/2)| < 16L, LP esp C122 
MC (20 < (ALL). Š 
因 ESI < V n, Н. z/g(z) d L0, 0) БЭР, 
IE | < n gs Ig C n). 
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BI G2), 88 
SPEI 
< 5) auf ng я DLP 
| =< Di Ig (V z DIY”. 
取 m = (D32/4D1. Wi || Съем) 时 有 
I) — exb( 一 212)1 < clsl'ep(—2#/3)/gG/ n). 
由 (3.65) 及 (3.71) 式 ,得 知 涯 = 充分 大 时 有 
| — B,/B,| < 11 — B1B < Cig n) <14. 
л = 4%/5. ША жє (VF) 时 ,有 1878,1 Sael n). 
BRA le 1] < jeje, эй [4] < agi n RES 
00) — expC—2/2)1 
< | (Bt/ Bs) 一 expC — B27/2B2)| 
+ LexoC— 52/285) 一 exp C— 0/2) 
< C| B, Ba exp(C — BiP/3B3) | g(V/ п) 
+ еру 08/2) — B3 Bhl (әр — Ёз /вї |) 


< С(# + lel exp (—#/4) fg п). 
这 证 明了 引 理 3.8. 
引 理 3.9 设 引 理 3.5 的 条 件 成 立 , 且 存在 与 ?无 关 的 4>0， 
致 
ECHECS A, jedes m, mEn, (379) 


уй (а) 为 一 组 常数 ,满足 条 件 Doa < A. da 


eži 8 — ER jm lottano (3.80) 
则 有 
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i=l 


证 .由 с, 的 定义 ,得 
E (>; eui) « by aS; E es 
j=l = 


i=1 


E (> oc) men (n). | in 


m 


+ 15 У) a&Eet] ES Ee* si 


jm =1 


- a 
2 (35 las; PE Leti ) 
j=1 
a 3 
十 oo( > aEet) | 


j=1 
1, + 1,+ L + L. (3.82) 
由 Elezl*t« Ets 得 


Hr 


I, < 25У) aS; E85; 


i=1 


2° Jn - 6 4 2 
dr 7; 之 as Е(2%е(4)) 


=< 254 \/ n Ig п), 
L,< 050 > yE 
j=1 


nm 


< 2402227 aj; E 5, 


i 二 1 


< no? 3 at, [ eG Саз, 1)) 


.j=1 


+ 5 Fat) | 


« 240871 + 4/g(1)). 
同样 可 证 明 L < C, L< C. 于 是 出 (3.82) 式 得 到 (3.81) 式 . 51 


127. 


理 证 毕 . 
5132 3.10 设 引 理 3.5 的 条 件 成 立 , 则 当 = 充分 大 时 ,有 
i yn B, 
ra — varl) 一 
WE. d Ed = pio, 及 —— 
M, == (nouam = I, — Xal X Xay X; 
则 由 周知 的 公式 ,* 有 


WE 
ay (> Gera > > e) (380) 
因 M, Е, 
У) > majk = u( M M) 
ub = u(M,) = rk(M,) =n — r ‚ (3.85) 
注意 到 (3.6) 式 中 оа 的 定义 ,有 , 


0s m,;—1— Sal 


ит 1 


1 < C/g(V ^), (3.83) 


1> m; =] — 2 Sui * (3; annj j 
nel LES М 
21— 2$ азы. (3.86) 
n=1 
由 (3.85) 和 (3.86), 得 | 
s (3: — 305-251 21 0) 
j-1 . j=1 k=1 . 
一 EP — Dm —22,mid2(»—r) } 
j=: i21 
>" {06 —1) 
zx 


‚ 128, 


= 23 (8; 一 792 аё — 2n + 2(л— r) |. (3.873 
由 e/g) 的 非 降 件 ( 当 x > 0), 8 SS V n [g( т). Ж 
p = Ее] = ЕСС < P D 
+ ECcH(e > n) 
< эЧ 2 o^ -- Е(( g n) 
CgC)o? + Dj). 


РЕ 
注意 到 (B — Dot = vae) R D ры 一 六 得 
таг (о — r)ol) 22 5Bi— ——2^5——(у(1)о* + D). (338) 
| i gv n) d 
RME EA E | 
уа (n — r)o3) < aB} + 2rof, (3.89) 


H B) > D, > 0, IÑ lmg(V n ) = co, 由 (3.88) 和 (3.89) 即 给 
出 (3.83)， 引 理 证 毕 . 
引 理 3.11 1? 设 W,- W,-- Иш, n = 1,2,+++,20—}В 
随机 变量， 分 别 用 F, 和 F, 记 W, fü Wu DITAN. Ж 
|F。 一 加 < 和 CAgCw=)， (3.90) 
P( Wal 2 C/g n) < С/С n), (391) 
则 有 
Е, = Bl < C/gQ/ z). (3.92) 
29 Jb W, аа + b, 205 2,7, Да В {br} 为 党 
数列 ,满足 条 件 
la = Ц s Clg(/ з), Ibl < С/е n), 
则 当 (3.90) 式 成 立时 ,(3.92) 式 也 成 立 。 
WE. UL 1° 为 例 。 由 显然 的 不 等 式 
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Fax — Cjena Y) — РС | Igi а )) < Е.С) 
< Р(х + C/g пуу + PUW) > Cig) 
HABA Ф'(«) 在 (一 co, co) 上 有 界 而 得 出 的 
ФО се туу — 91 < С/е (я) 
即 得 (3.92)。2* 的 证 明 类 似 , 从 略 . 
(=) 定理 3.6 的 证 明 ”由 引 理 3.5 和 3.6, 存 在 L > 0,02 
0, 1 一 1, 2,3， 与 ?无关 ,使 当 = ЗЕ ЖЕ S48 CASH.) 2 bn] 
2, 这 里 A, MH, 的 定义 分 别 贝 (3.73) 和 (3. 75) 给 出 . 到 A=4D,/ 
ЬУ) 3ECAL) < bun], Mor 
A; = {vi Elesg(e 24.910.452) 
故 有 
+(А„ПН„ — А„) È 5л{4, 
从 集合 ANH, 一 Az 中 取出 AT = min (a /g Zn), bjt} t 
指标 ,组 成 集 42 ,而 令 
| А, = Íl, tta n) — (A; U Ar). (3.93) 
HJ CN 4.) 2 bn/2. Ф 


"= A > X4) : 
A; 一 (> 9) › 


у п 2 ee, 


(3.94) 


A; = TEAS ése) э 
i 2 4 z |Y 
og "= Én == p (> — E 
T, = Cs — A, — А», 
с, К 0.03.77), КЖФ ЕРИ К Ж fas XUI o, 记 T, 05k pe K, 
有 
Т„— A, ОРФ», (3.95) 


‚10 


sup |PC OP < z) — plr) < Cigla), (3.96) 
选取 使 (3.76) 和 (3.78) 同 时 成 立 的 «27 0, 则 由 (3.78) 式 ， 应 用 
Berry-Esseen 定理 ,得 
sup| P(Z, =< т) — Ф(х)| 


" jesse LEO exp( —70/2)| d: + Ciel n) 


< C/g (/ п), 
(3.97) 


另 一 方面 ,用 Markov 及 Marcinkiewicz 不 等 式 { 见 第 一 章 (1.60))， 
得 
P(|Az| > 1/e(V = )) 


< Cg(V/ уя? > a( > is ) 
« Cg(/ 2 уз? > a( x аге) 


TM 


« ceo s) "g D eR Y 


ve 4, 


< CP 2 )u (zy D Es, 


< со уа y > EG, (8) 


< CG n n”, (3.98) 
E зш т Qn ), RU 
РО] АД] zi/gQ/ 2) «Clg( n), — (399) 
# AI binji т n), RE g(A/ s) < Co^, 这 时 有 
РОА | Ze 1/g(/ ву) < Cel n)/n 
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=< Cn” < C/g ( n ). (3.100) 
由 引 理 3.11 ,为 证 (3.96), 只 需 证 明 
sup|PCT, < z) — 9(2)| < «C/g( n). (3.101) 
Hi Berry-Esseen 不 等 式 ， 为 证 (3.101)， 只 需 证 明 :， 对 上 面 选 定 的 
n > 0， 当 ”充分 大 时 有 | 


|, НФС — exo(——8/2)| ds 
«па 
< сім n). _ (3102) 
但 
Í zb eG) 一 expC— 2/2) de 
ИШЕНЕ 
= ES |#| * 1f) 一 exp(—#/2) de 
* MEL. enian) | de | 
| ИТЕ о hole 
АЛ, +I + L. Е С (3.103) 
由 (3.78) 式 ,对 充分 大 的 nA | 
n ск 2). (3.104) 
1, 
|а 17189 (8 >, £l m B, |l еса 


ie A94, 


« Í Cesp C— 4/0) "EA de 
EE 


—— ш? 
Б "T # А 。 "UE >( > bs 


PER "Tm 


кл; — j a Cle). (3.105) 


为 估计 五 ,分 两 种 情况 讨论 : 
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G) A; = bnft < n gG n), 
这 时 有 | 


„<{ | 
ДЕТ 


ПЕ '| Еехр ( it Б) {Мп В B.) E |A] de 


MEET 


NM DES 


їр (т) 


=< 


x > ( >) а.е, de | (3.106) 


vE Ag 


< = сеа < СІЕЯ). 
Gi) à; = "lg (бп) < Баја, 
这 时 有 «(М п) > Сте, B5 3.9, 得 ЕЛ3 < C/ng(N/ п), 
i 
E AG < (Ел) < Cn7^g "(Af n ), (3.107) 
25 lil 


га ES | Eeitt ,- pA, | аг? 
| NITE 
[FIL TCU "A 
Á J, + Jap G3.108) 
此 处 16,| < 1, B.6, 只 与 (et: € AL) TEX, Жө, 5 Us ve 
Aa) 和 (ez € An) 相互 独立 。 
先 估计 ,由 上 述 独 立 性 及 (3.107) 式 ;有 
[|] Eert, A] 


< || ЕМ үе 27 Ew/ Мә B, )| | 


ўсди 


=< C|: na g^ n n ) Cexp( tr/mn) 2*4 gti) 
< C ng HV n Jexp( —A, t/g n). (3409) 
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| шүл _ ||| Een, -Ap0,ALIdt 
Мыс УАН mM) 


< Cn pg (Mn) TT ив jel ge 

< Cg” n Jn exp( min”) = OV а )), (3110) 
而 

ЖЕ пас абда 
© us 2284 Ong ^ G/ n у») 
[IE (Уз) E 

= сев) 27^ == O(g (A п )). (3.111) 

E (3.110) IC. 11 2X AMA 9 充分 大 时 有 | 
J, € CÍg( n ). (3.112) 


Atir Jo ЖШ 
| Elentra pAn) 


C 
< Y Sal, Ее nq an] 
=n & = ° е 


G r 
LIE А r 
十 WR ы > 5 lass aus" Е еж, ezereitt,- ^ni 
7 па] (Qus! € Ag ren!) 


Š MO + М), (3.113) 
当 充分 大 且 || S ngQ/ n) 时 ,有 
M.C) 


€ r 
== : n 2; 2 aka, E es 


< зреет 


n=1 бєй 


Eep (is > С] 


(iiw ЕА ПА 


ОРЕ, КН mo |z) SUD 时 有 
М (гт) << > > али» (3.115) 


нт j= 


134 。 


此 处 


gai = ECGhexoGitu]v/ п В„)). (3.116) 


е1 = |E( $ [ep GE, J n B.) — 11H? 
=< ( 12] El e> i CU pog Сызла 
= — сЕ, | < —— Ecaj En < =o dit . 
Wa В, ” e 


(3.117) 
LS 充分 大 且 [中 «абм п) 时 ,有 
< du»: У) atu Уен 
«etr deum. (3.118) 
А (3.113), (3.114) E (3.118) 3X, 4 n 充分 大 时 有 
c í mui [^i 
J, < —= _ (1 + e de < eos 
Мп ае 4n XJT y 
(3.119) 


办 此 ,由 (3.108),C3.112) 及 (3.119) 式 ,对 情况 (i 让 也 证 有 明了: я 
充分 大 时 有 
h< c/¿e( n). (3.120) 
现在 ， 由 (3.103) 一 (3.106) 及 (3.120) 式 ， 知 (3.102) 式 成 立 。 由 而 
(3.101) 式 成 立 ， 这 就 完成 了 (3.96) 式 的 证 明 . 
现 定义 


9? 一 


z^ — G — е) 


= Гы > (> wes). 3121) 
D. 


БАР" - 6-02) —4.| 
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< (> (P — Егу + го") 
- GG arn re) 


1 Din С, p 
-一 一 一 一 一 一 一 | ——— r = 2). 
< JyE Ut s) Ch 0/ ) 
(3.122) 
又 由 Cauchy-Schwarz RER, A 


LINE 


= JM la аР, (а) 


№ 


n I> 1⁄4 теру 


ECC) 


m S 
UR 


(3: 21 
(я ) ` 
«(бау ау 

< (Xue) t2 X (Ег)? 
«3t ] + урур кеш 


= (> 2053] OD n ШО п), (3.123) 


由 (3.121) 一 (3.123) ,并 注意 到 В, 之 VD, 之 0 对 一 切 4, 有 
| 9? — C/g(/ n) & 09 „+ C (n) (3424) 

由 引 理 3.11, 及 (3.96) 和 (3.97) 式 ,得 

supl PCO? < х) — Ф(х)| < < C/g n). ^ (3125) 
304 | 

Q9 = (n — rX — PIN n B, 

1 Z > 
= PAP: ej — (n 一 De) 


-7Tx > (5 «е, JP (3.126) 


比较 (3. 121) 与 (3， 126), AW QP 与 o? 的 差别 , 仅 在 于 将 О 中 
的 ё.; 换 为 e; 因此 ， 对 任何 * 有 


IPO? < х) — P(0P < х)| < PC ~ 4) 
i=l | 


* 1 " Е 
< {ано суту reo 
< Dig n). | (3.127) 
将 (3.125) 与 (3.127) 结 合 , 有 
sup| P(O < z) 一 PE) < C/g(/ n). (3.128) 


最 后 ,有 
B-P мп B, » 
i 一 —— — 一 一 一 一 一 一 一 09 
varla) (a — ғ)м чаг(0%) 
根据 引 理 3.10, 知 (3.83) 式 成 立 ， 故 由 (3.128) 式 以 及 引 理 3.11, 知 
(3.67) 成 立 ， 这 就 完成 了 定理 3.6 的 证 明 。 


§ 3.3 бож (П) 


在 线性 模型 (3.1) 之 下 , 设 条 件 (3.2) BOUE, Н er 的 4 BEP 
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眼 ， 在 一 定 条 件 下 , 不 难 证 明 0% = W n (3 D, У 6 С 
伍 于 标准 正 态 到 :此 处 ， 


D} = (4) = 5 2 a — 0°, о 一 Ее}. 
太志 
(3.129) 
{由 于 此 处 并 不 要 求 有 一 定 的 收 化 速度 ， 所 需 的 条 件 比 定理 3.6 要 
m.) 

从 统计 应 用 的 角度 看 ， 这 个 结果 的 意义 不 大 。 因为 D. 也 与 
模型 中 的 未 知 参 数 有 关 , 所 以 还 不 能 直接 由 上述 定理 去 构造 的 
AED arb. 或 对 中 进行 大 样本 检验 等 .要 作 到 这 一 点 ， 需 
要 通过 样本 对 D, 进行 估计 , 并 以 估计 和 值 代替 DP,。 这 个 任务 比较 
易于 完成 . 下 面 我 们 将 提出 D, в BRA EE Das 以 之 代替 
D,,?5 

w, £ V n (o — о?) б, ®> N(0,1); 
这 样 的 结果 就 可 直接 用 于 统计 目的. 

信和 极限 理论 的 角度 ,考虑 到 定理 3.6 的 结论 , 自然 就 提出 如 下 
的 问题 : : KA G, i W, 的 分 布 , 则 1G,。 一 8 能 以 怎样 的 速度 趋 
FTO 陈 希 正 首先 在 [15] 中 研究 了 这 一 问题 ， 得 到 了 一 个 初步 结 
Ж. 不久;, 赵 林 城 在 [16] 中 继续 这 一 研究 ;基本 上 得 到 了 彻底 的 解 
决 ， 由 下 面 的 论证 可 知 ,为 了 达到 理想 的 最 佳 速度 O(n7).xt 58 
机 误差 序列 加 上 supEc% < о 的 条 件 是 需要 的 ， ， 0 

转 到 具体 的 讨论 ， 先 给 出 D, 的 一 个 咎 计 . 在 {3. 1) 的 前 次 
试验 的 基础 上 :以 和 记 Y RÆ: 

баке Ya — sihes k=l, tans 
此 处 Ё, 29 8 ВЕ LS fhir. ie А 
Vr, n (X,X,) XS == (tun. сзсз» баки)» k=l, ean, 
PU) En ӨГ Ж) 
Srt = Y, — Уса = 2, — Илвес > k=l, 


Yes Cim 的 意义 见 (2.2) 式 . $ 
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A 1 1 Ë m 
Di = = Ў (5 кы) 


-:2s-( _ 2) +, (3.130) 
即 以 D, 作为 D, 的 估计 ， | 
为 了 简化 记号 ， 本 节 仍 沿用 前 节 关于 字母 C 和 的 约定 ， 且 
C, С, ` 均 为 与 无 关 的 正 的 常数 . RIA 
定理 3.7 设 在 一 般 线性 模型 (3.1) 中 ， U ERR AO. ?2) ,而 
Das D, 分别 由 (3.129),《3.130) 定 义 . 设 


D, С, > 0, 当 # 充分 大 ， (3.131) 
— L 0 Gum 
此 处 F, 为 e, ЮУН. Шт оон, 
5,/D, 51, 


W, AV (оз —)/Ё„® N(0,1). 
ПЕ. 由 (3.2),《3.131) 和 (3.132), 不 难 推出 {2 — 2, n = 1, 
2,…'} 满 足 Lindeberg 条 件 , 故 


% (4 o D, 5 м(0,1). 
й=1 
由 此 式 ， 《3.6) 式 及 Е >(> Ga;ik CR ) = ra? 可 得 
j=l ^k=t 


„Га (0% — 9)/D, Š N(0,1). 


故 为 证 定理 3.7 ,只 需 证 明 0,/р, 全 1， 而 由 (3.131) 式 ,此 等 价 于 
AE RE | 


P; 一 D: 5, 0. 
依 系 3.1, 在 本 定理 的 条 件 下 ;有 ol >> оз OO UE Eh. RREN 
r, E 5 (Eis — аа) 0, (3.133) 
k=1 ` 
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为 证 此 式 , 将 T, 表 为 
T, = Г — 4Т„ + 6T, 一 4T, T Tas 


1 "n 
| r= Y 22 6i— 24)» 


pus Жар MM I 
Tai mu У Саке)? (3134) 


к=1 


而 往 证 Ты» 0, i == 0,1, .……，4。 为 此 先 注意 
эй Ў ч АР 
k=] 


k=1 


- є{х,(хх„у- >) E 


= trå (X X) (XXa) (XX, 0X2) — 
— {GAD AX = r p. (3.135) 


因而 有 ehgsdVlep. X IRG3.132), PARES n XS TE 
Жа, as 和 ck 一 1l2 c É ` 
Е(Ёше‹›)* = >, оо) 
+ >; оймо < al V all's 
1с» 


故 出 (3.135) 得 E|T,| < apt/n. 又 由 


Elh Varem) = Ў) ранее) 
Piel 


| A n 
= vaak 十 > virat < all Y M^; 
jl, k 


得 ElTm| < op/n， 因 为 
елес)? | 
«АО + (Уе) (3.136) 


& ETT, < 20817. + E|T,,|) < аруа, X1 Tus MER 
• 1405 


=I ERV arem] Saek + nV nemn) 
于 是 由 (3.135) 式 ,得 


f$ т 
ЕТ. < 27? У) Ее} + n7? У) EOV aem) 
. k=1 кәл; 


«sso D Aa! e (а pr >. 


综 上 所 述 ,我们 证 明了 : 当 #*-~>co 时 ， 
E|T, TM Oln”), EjT,;| “м ову), zi 
j= 2,3,4. | 2 0437 
对 Tu。 则 如 下 处 理 : 以 Fa du екй ЇН, (3.132 у= ОЕ; A 
lim {зар f. M. акку} = 0. 


dnd 


EUR 3.1 的 证 明 ， 知 (3. 8) 和 (3.9) 同 时 成 立 (将 F, DA Fan. 再 


由 定型 3.1', 即 得 Tw > 0。 由 此 及 (3.137)，(3.134) sk, BOR 
《3.133)。 定 理 证 毕 . | 

为 了 研究 1С, 一 是 的 收敛 速度 ， RTEA TEEM, 它 同 
时 适用 于 U 统 计量 和 线性 模仿 . | 

定理 3.8 设 {e 兴 为 独立 随机 变量 序列 , {as} 和 {5,} 为 实数 
Ў, la,] + 12,1 < €n7^, Zu RI X. 均 为 е, 的 函数 ， 而 фон 
为 ej er У R, EX, 一 йй =0, ECo,ule) 一 0, 
iki, k=l, tsn, п== 1,2, EX Её), т 有 


让 二 二 S EZi > C, > 0, supE| Z, P x C, «oo 
т == uk 22 C , bd “sk 3 >x 
k= , 


(3.138) 
rr < оо, (3.139) 
"yk à I 
Egri < pa 十 pak + энн» У! (п + vu) < < Ср, 
RTI 
(3.140) 
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l LÀ n 
和 > Фик» 


lajen 
则 | те 
supi PU, < x) ФО) < CÍ / n. 
ii. 首先 ， supEZs, = С;. 令 
A = (k:1 < k < x, EZ > C,/21, (3.141) 
Wi] E (3.138) 
| Cm < у EZ < C,- 3ECA,) + C;nl2, 


k=1 
故 
sd. ) > 52 с, eCa. 


令 C= C/C, B4 


В, = (k;:1 < k < n, uh» < Ci. (3.142) 
MJ C;- 3 (B2) < > (pi, +O < Си, 此 处 Bç — (L, 
t=1 
п} = В... 
| HBa) < Са, 
因而 


#02,0#,) > Con, 
在 2,08, 中 取出 [Vw] 个 指标 组 成 指标 集 47. 令 
А01, seu n) — AZ. d Ja m n — [I n], BARS А = 
(1,5. JY. dd 


1 = 1 
5, ELO 之 Уе 
"T 5y Cnis 


n d, fe^, 
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A DEA ba on 


i€ ^, 
T, n as D, Хы» 
j=l 
Т» = 4, 2, X, а, P> Хы» 


jed, 
Т, =T, Т = а, D> X, 


А, 一 Б, > Paiko 


Е 

А, =b, У) m@s b, Хуне | 
li < 

мы = 5„— A= p, », р 


ИЕ Jati j= 


{ k-1 
Ё b, 之 Фә. 
"E 


由 引 理 3.7， 存 在 与 *# 无 关 的 常数 090, 5,270, 使 当 |l < 
V za 时 ,对 任 一 kc А, Ж 
|Eexp itta. 0) | < ep(—à,/n), 

故 有 与 无 关 的 8 0, 当 [rl < na 时 ,有 

|Еехр(54)| < exp(— t/y n), 

[Еехр{&(5„ — Gul пт — Gud М п}! (3.143) 

«CU, Pe к ЕЖ. 

由 E(g,ule) = 0 Al, Е(фр юрга) = 0, 内 要 {7, А) = (p, 
0). WH G.140) 8 | | 


k—1 
EJA =a >) У) Еф 
k j=l 
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т" Эф Bak СР рар) 


* і=1 
< Cn Ue из + C n «n C У vj) 
` 1 í ⁄ 
= Cn” m 
因而 | 
POAZ 1/2) EnElA x Cn 


又 由 (3.139), 有 
E| T2 < Ca?EID XA < CLE Xal" 


Cn СЗ Cr”, 
故 
POTI) >1/ n) S PEITIS c/ / n. 
故 由 引 理 3.11, XJ EXE ЖЕ КЕЁ Я ПЕНЯ 
sup|P(S, + T, + As < x) 一 0 (2) < «Ci n. (3144) 
由 第 一 章 定理 1.32 知 ,在 定理 条 件 下 , 存在 与 # 无关 的 常数 m > 
0, 使 
| | rj 71|Еехр(и5„) — e| dt < CÍ Мп, (3.145) 
Vile ў `. 
且 不 妨 设 此 ”也 使 (3.143) 成 立 , RNE . | 
| E exp (7CS, + А„)) — Еехр(и$„)] 
= lef - [ELA expCG,))| + РЕЈА, * | EexpCSz)] 
АІ) +10). 703.146) 
(3.143) Е 
У E|, Sa p a | У EGE к) 


i<x PES. 


< >” С(1 + Бе) < С 21 G + ui + Fak + vipat) 


i <k 


< Cm, 
КАП < V nn 时 ,有 


ИТЕ 


1G) < Cahe] SY EC a ese)| 
jk I 
< Ca^ |z| exp( —870) > y |Е{р„кехр[ С; + Z, DI ^ 1)1 
` j <x 


=ç Cn ° |, | exp( —82) У, EJ (etw? — ]y(eittm/vs 
і <k 
— Del. 
< Cs 02|, |'exp(—B#) уз, Е| бкр 
< Ge |.| ехр(— 80), 
160) < РЕ |А, |?ехр (—8P/A/ n) 


= Cn р 5y Ефӊкехр (—8/ Mn) 
jk 
< Cn? Pexp( —àr] М n) 3 Сиз + им bh 
f <k I 


=< Cn”!exp( —8r] Ма), 


故 | 
| l7 LG) < C n, (3.147) 
| i n T. 
PA HITRO) де < 2 " rexp( — 8P/A/ т) 


C 


мав 


< 


N e "du x Cif n. (3.148) 


又 由 
EITA] < (Етиен 


«Cas por “zl x. pe" | 


& 


= Cn’ š Ст? x Ca^ 
及 (3.143) 式 , 当 [e| V ^a 时 有 
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(Eers, plenig — 1)| s [e| ЕТ» [Ее | 
< Cn^^ rl exp( —8r IA n ), 
& 


j izi 74 | Ece, i erp 一 Eens, «Xp | dt 
пут 


5 us 
x Са | ý exp( —82]4/ з d: 
0 


PA 
aa 
由 此 式 及 (3.145) 一 (3.148) 式 ,有 


| _ Be EexptisCS, + Tz; + А)} — e^ д 
idein 


< Cn^^ - |; asqa < CHV п, 


<c/ n, 
因而 由 Berry-Esseen. KFARA 
sup| CS, + Т. + As < z) — Ф(х)| 


<| jEexp{iz(s, + Т, + А} 
Гау nn 


— “nd, + CJ n < Cl n. 
这 就 证 明了 (3.144) 式 ,因而 定理 得 证 . 
关于 [G, — Pl 的 收敛 速度 :我 们 有 下 述 定理 . 
定理 3.9 设 在 线性 模型 (3.1) 之 下 、(3.2) 及 (3.131) 式 成 立 ， 
且 


supEz$ < оо, 
b 


IG, — el — 001/4 n). 
为 证 此 定理 ,需要 引进 两 个 引 理 ， 为 此 , 令 


бз 7 > (4—0), A= 7z 2 E 


т 
і, = >; айк» lajt = 2 4154155 
П 


=1 
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һа У) ЗОРЕ РУТ і, k=l, -z LET 


j= f=l 
| жуы. diae. 
Zak ari (1 F Asa) Cei = а"), k =< л, Dš = > 五 Z2 
k&-t 


(3.149) 
由 本 章 开头 的 讨论 ，X。(XsXs)-X; — ALA., Eh A, 38 xn 
阵 ,其 元 素 满足 (3.5) 式 . 记 d — Eel = fn A 


1 r э ” 
Tau >> Onjk€k )>; акей 
mr R=1 
| u - 
一 一 > (элиг) 2 saf + — 2) акей 


会 Th 十 TH。 (3.150) 
由 {3.5) 式 ,有 


0 si, < 1, Ўл ry 
Ак < У вй > вш& = hodnts > Аа < 


i=l j= 


> bs <> с (X GajkGajl Ed) 


k-1 j=1 “iat 


= С У У аё (> Л] = Ca, (3151) 


j=§ k=1 i=l 


= 1 g€ 
Di > Di = + 2 ava) 
k=1 


二 Bla 2am) vare) 


2 LÀ 
205 — = У) tma > Di – Cia, 


k=; 


me 


ili Ds 之 C, > 0, 24 n 3623 ABS ,有 
D,> c> 0, [D,/D, — U| € сїз. (3.152? 
引 理 3.12 ”在 定理 3.9 的 条 件 之 下 :有 
ЕОС, ET < Cjn, ESC], 


Elaa — cy < Clm, (3.153) 
ЕТ» < Сја?, f= 2,3,4, (3.154) 
E(T4) «Cm, ЕСТ) < Cin, | (3.155) 

E|A,Q,|? < C/n, EJA, Tml < Cin, 
EJA Tmn < C/n', (3.156) 


证 ,〈3.153) 式 容易 得 出 ， 今 证 (3.154) 式 . 由 
>` on Vahat == CoyX (X 2X4) Хае - nA, 
к-т . 


及 (3.135) 式 ,有 E 
ЕТ = a Qe] < Р? Соу 


- 4 
= s?E( > буа) = E Aš SC”, 
r= 


ET? = n° УЕ (Уес) 
k=1 


7? Y EAV neVe 


RFI 
=з? > Eek Varem) 
t=1 


п S M EA Vrem) V. EAV nem 


к=”! 


n ——— ———Aaà 
= 572 (> VEA mem) • 
к=з 4 


п 
4 
EAV aew = Ec (Dorue; ) 
j=1 


4 
< CEci(viuei)- ск‹{Е( vases) 
: БЫЛ 


n" 
< Cou +С Ў) s +C | »7 ШҮН 
PER 1&jsi n IER ma R 


<< CIV Al; 
故 由 (3.135) 式 ,有 | 
ЕТ?, < (x c]v AP) =< Сп, 


k=1 
由 已 证 之 结果 及 (3.136) 式 ,得 ЕТ, < cx”, (3.154) RHE. 
为 证 (3.155) 式 , FH Hülder,. Marcinkiewicz 及 Jensen 不 等 式 ， 


注意 到 dL | | 
TAPT: PEL enn (> T 
| Съ? D(z b RESI ^) Wu (в p OsjkÉk 


1 


» [е 23 uu) | >с 


Pei 
! q^ 
Crn? Y [а (X а) =< Cn 2, 
ў=1 &=1. 


利用 y ae Cw， 容易 得 到 (3.155) 式 中 另 一 式 .(3.156) 式 可 由 


к=1 


Schwarz 不 等 式 及 已 证 结果 得 到 . 引 理 3.12 证 毕 . 
引 理 313 在 定理 3.9 的 条 件 之 下 ,对 任意 CH 
PUTA 2 Cm < с//п, ^ (3457) 
此 处 а= у n (02 — s)|D,. Hid g = ei — 0, h = eh— 


aks 


8 E 
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H, — 27^ У, (Egal 2n (n — rjg + раде), 
k=l 
则 有 C, tE 


PHI C n) — OV п). (3.158) 
证 . 仅 限于 此 处 ， же r. v. X, i X —X-—EX. Ж 
25 к n Vn 


T . 
ОРА а gs (3.6) 


n — r 2 


IT 2| < Ca^? |55 zi 5 ha | 
п Жш: 


+ [^ {А„Ть| Cal Tl 


п — 
cw? 5 тА 

k=1 
УЕ В| + co Б вњ) 
k-i Zx 


+ [^ | As 了 | 十 Cn ^| Tmi 
А+ +1 +1, 
Hi Marcinkiewicz 不 等 式 , 有 


ы — 3365 
ЕГ? < Cn iE br Guo] 
k=1 


+ lec? 


ы pad 
n? >) El gih < Cs? 
k=1 


2 
Eli < Cn? + Cn? E P2 giha) 


P*k 


< Cn! + Cn P (EglEM + E|gihi| Elguul) 
IER 
= Спі, 


帮 由 以 上 二 式 及 引 理 312,8 
P(VT aa] 22 C7) < У P(1, > С. 40) 
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= CHF + CattEIi + Ca EIA,T|) + a FET 
= Ст. Ся + Ст? Сп + Ст + Ся + On + Cg! 
<c/ Nn, 

此 即 (3.157) 式 ， 由 要 ,的 表达 式 ,有 


о y r ~ ~ 
H, = п? PREE 一 Z) Tgi + еа, 


+ n 3⁄2 2 f- ge^. 十 2(1 === 去 ] we 十 Ancus] 
ki ` 
ЁН, + g,. 
由 ll < Cn, 易 知 аа на Сп, 
有 < 
E(GI.y < Cn^ У dvac( gà) + дема) < eu + 
ЖОН C> 0, 使 (3.158) 式 成 立 . 引 理 3.13. 证 毕 。.. 


最 后 ,我 们 给 出 定理 3.9 的 证 明 . 
定理 3.9 之 证 。 由 (3.6)， 有 


La 一 -y gi — а“ 
E (1- Ly [005 — e? + 20705 — у] + О(1/а) 
= — Z) a- => 


十 20%(»ж — r)n77(0, — A + О(1/я). 


由 Di, Di е .(3.129),(3.130),325 Ж 1(3.134),(3.150)=, 
有 
9,42 DPD — 1 = (Ô — Di/|Di 


- ре т, (t =. га 2% -中 


415I。 


=р;г? LS — 4T,, 6T4 — 4Т + Ты 
-(i- zi (9 — оу 
— 2o'(n — r)a^(Q, — А„) + OCU D! 
um D7 {—+т„ + 6T, zx AT, + TA 
-(i-Tyc-ev 
È + 20°(n = r)n ^A, 十 oa/») | 
` + DZÍ—ÁTA — 2040 — r)a aQ, + РТ» 
会 Qn + 0, + DFT ho. (3.159) 
当 lel c 1/4 Ms 40x «aa (1—4) < «ls, Ж 


当 |Q,| < 1/4 时 ,有 
|D,Dz162 — (1 — 0,/12)52| 


= 11 +0) – (1 – 2,2) - E AM 
< osi «(9 + Ql, D;'TÀ, а, 
此 处 0 = 4 я (05 — e /D,. Ңң (Oal + 195] + DZ T4] 
<1/4 时 有 
| 
< (E ion] + 20% + 291,)181| + CTh + Ст, 


< Сс„(10..| + 9,)|6;] + C TZ 十 ССТ)? 
А Rh | (3.160) 


1 l1 ~ 
Wa = | 25 — 1рет.) а? Й 


Wa ———À (о. - A, 一 =. 0..0, 
d L DFT w9, )» : | (3.161) 
n 


2(z — r)D, 


= J 2). 


R; = (Qn 十 РТ „) (a, 


КШ 
W; = W + RZ + O(1// n). (3.162) 
如 前 ， Ke gm d —06, h-d-—usZa- a — А.к)» 


bi p D EZ, Hid 


k=] Aes 
Xa 一 —QD,)- TEN = Ег, Де 1, 5-65 
(3.163) 
Pait m 294, Dz ejer С 
— QDiD,) (gh. + gih) 
+ 2(D2D,)7 aueigk 十 паке) 
+ 2(GDiD,)(s 一 (ив 
pe 5 k—1,.:, ^ ` (3164) 
; Zn 427^ V X, | 
== D, x= : š "E : 
^a У) фа. | (3.165) 
14: <4<а C do 
则 . 
| " P 
ne U, 4-0 XH, 
д (л — r)D, ч 
式 中 万 , 如 引 理 3.13 FR 0, = ps 再 由 (3.162) A 
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有 


"б, -ov n), 


"s (n — r)D, 


(3.166) 
由 (3.164) 式 , фид 为 ej, ex 的 对 称 函 数 , 且 ， 
E(q.alej) = 0, FÆR, k=l, зул, 
取 ovi, 一 zl 十 1， 则 由 (3.164)(3.151) 式 ;有 
Egi, < Спа + C + C(pl + gl) + С 
< C + ui, + оу), je k, J. k= 1, py 


Ë 
D =, < Сл, Dv < +i), 
; T k=1 š 


k=1 
因而 对 (3.165) 式 定义 的 U,, EE 3.8 的 条 件 全 满足 ,因而 
supl PU, < x) — P] < С/у». . 467) 


由 (3.161) 中 R 的 定义 ， 及 (3.159) 中 0, 的 定义 ,考虑 到 D, > 
c, > 0, 有 I 

IRI < С\Т] + TA] 1. СА, + 1/ V ny, 
由 引 理 3.12, 有 | 
ЕК. | < С/е, 
РЕ; > СМ n) < CV пЕ|Е | < С/у n, 
由 此 及 (3.158) 式 ， 并 注意 到 (3. 1352) 式 蕴涵 


TESTS -1 «ci, 


多 而 可 对 上 《3.166) 使 用 引 理 3.11 ,由 (3.167) ,有 
sup [POVi < x) — P) < CIV n, (3.168) 
由 引 理 3.12 ,并 注意 到 D, > C, 0, A 


PC|Q4] + 19] + р;? |Т„| > 21/42 = OU n), 
故 由 (3.160》, 得 


+154. 


жї dh vas har 


1С, — Ф| = supl PO, < x) — ФСк)| 
< sup| PCW; < r) — Ф(ж)| 


+ C| Vn + РС > MAI) | 
< C] A/ 5 +P(|R;| v п), (3.169) 
由 (3.159) 中 Ош, On 的 表达 式 及 引 理 3.12, 有 
EQ) Cm, ЕФ = Ce, 
故 对 任意 的 С>, 有 | 
PC(19.| + 0, > Cu/ Vrlogn) < СМ n. — (3170). 
但 由 定理 3.6, 或 由 定理 3.8, 有 | | 
suplP(B < x) — Ф(х)| < C/ V n. (3.171) 
кн (3.160) К; 的 表达 式 , 并 和 用 (3.170), (3.171) Ж (3.157) 
式 , 在 在 Cw, 使 | 
PCIR) > 1/V n ),< P(| Q,.| + 08,22 Совт) 
+ Р(|92| 2 М logn) + Р(ТЬ:> Col V п) 
+ P(| T 62 > Cafn) 


=< c/ An + (CÍ М n + 2G — Ф G/logn))) . 
+ Ст?ЕТ + C| a 


< с/у, | (3.172) 
再 由 (3.169) 式 , 即 得 | 
lc, — ed < с/у n, (3.173) 
这 就 完成 了 定理 3.9 的 证 明 ， | 


$34 Урва 。 


(一 ) 引言 和 结果 ”前 两 节 我 们 讨论 了 误差 方差 估计 п. Ж 
经 过 标准 化 之 后 ,其 分 布 函数 G, 收敛 于 标准 正太 分布 的 速度 . 恨 


%155> 


REE 3.6， 在 一 定 条 件 下 ， 存 在 与 > 和 x* 都 无 关 的 常数 C. 使 . 
1G,G) 一 B(x)| < C// n 对 一 切 #* 和 z. 由 于 这 个 估计 对 所 
有 的 x 同时 成 立 , 而 表达 式 C/V n 又 与 无关， 这 个 估计 。 或 称 
之 为 G, 收 敏 于 外 的 速度 ， 叫 做 一 致 性 的 . 从 与 + 的 关系 来 说 ， 
С Vn 这 个 一 致 性 速度 固然 已 达到 最 优 ， 但 有 这 样 一 个 缺点 : 
设想 * 很 接近 于 一 ce. 则 С„(®) 和 B(x》 都 很 小 ， 因 此 对 固定 
的 # 而 言 ,| Gn(x) 一 BCx)| «ci» 就 很 粗糙 ， 当 x 很 接近 于 
十 co 时 ,也 有 同样 的 情况 .这 启示 我 们 , 在 |G — Ф(х)| 的 
` 更 精密 的 估计 中 ， 应 当 包含 两 个 因子 : Ж-А ВОЧ ғ 公 
共 的 因子 即 C/V n , 另 -一 个 因子 AG) 则 依赖 于 x, 且 当 |x| — со 
时 ,应 有 4(x) 一 0. 这 种 类 型 的 估计 称 为 非 一 致 性 的 . 因为 我 们 
经 常 着 眼 于 G.GO KAF IO 这 个 事实 。4 (wx) + CJV n E 
称 为 非 一 致 性 收 倒 速 度 ?. 这 种 非 一 致 速度 的 优 劣 ,取决 于 当 
1z| — оо Bd. AG) 趋 于 0 的 速度 如 何 。 速 度 愈 快 愈 优 . 

Wb E. E. oo 为 独立 同 分 布 的 随机 变量 序列 ，E5, a. 


v5) =, El&I < ©. BLG,G) 18 D E а) no 的 


分 布 函数 ， 如 所 周知 ，Berry-Esseen 建立 了 一 致 性 速度 NG. 一 
o|«c/V». 到 六 十 年 代 ， 开展 了 非 一 致 性 速度 的 研究 (NL 
L17] ,第 五 .六 章 ), 得 出 了 很 深刻 的 结果 
|G,G) — @G)| SCIV a + |9). 
对 于 非 独立 和 的 情况 , 非 一 致 速度 的 研究 当然 更 如 困难 ,迄今 得 出 
的 结果 很 少 .本 书 作者 在 [18 ] 中 研究 了 方差 估计 o 的 非 一 致 速度 
问题 ,得 到 了 完满 的 结果 (在 误差 独立 同 分 布 的 情况 下 ): ` 
定理 3.10 设 在 线性 模型 (3.1) d, (nl 为 独立 同 分布 。 且 


IT》 严格 说 来 ?这 不 是 一 个 合理 的 名 词 ， 因 为 * 对 每 个 固定 的 > 有 1,00) 一 Pei 


XCAGO/V n, KARERE ОСІ n), 租 * 非 一 致 竹 收 伍 速 度 ? 这 个 名 
词 在 文献 中 已 很 通用 ;我们 此 处 也 沿用 它 。 ， 
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Ee = 0, Eet < co, Ф == var( e?) > 0( 由 以 上 条 件 知 0 Eei— 
= o* < co). 以 G, id c G72SX Bp SC a 的 分 布 函 数 , 则 
lG,G) — BOI < C/ nQ +] (3179) 

对 一 切 * 和 正 整 煞 = 都 成 立 ， 基 中 C 为 一 与 ?和 + 都 无 关 的 常 
Ж. i 

(=) 落 千 引 理 ”定理 3.10 的 证 明 很 复杂 . 为 清楚 起 见 
证 有 明 若 干预 备 性 事实 。 又 为 简便 行文 计 , 特 作 以 下 的 约定 : - 

1. "n 充分 大 "一 语 常 略 去 (所 出 现 的 = 都 还 解 为 充分 大 的 ). 

2.C 记 一 与 和 >* 虱 无 关 的 常数 , 每 次 出 现时 、 即 使 在 癌 一 
REAA ,也 可 以 取 不 同 的 值 . 

3. 经常 出 现 的 语句 "存在 与 = 无 关 的 9 > 0 > 0, с> 0у, 
使 当 = 充分 大 而 | < V nx 时 ,有 …” 简 化 为 “fa n, Y" Chl, 
p» n» ty). 

4. Bg T g, EXT —co < z < оо 的 函数 (可 与 了 有关 )。 
称 £i ~ gis 车 存在 与 了 无 关 的 4 > 0, 使 

_ deleto — gd la &С/[/птп, 


ауу 
又 记号 104), #(A), БЭЯН а КАЖЕ J: Br @ 
TRAB. i 专用 于 指 V —1. 
现 令 

8; = ejl Cl ej] < т), 

ef = 2; — Eë;, 

Ë; == M — E8, dl == чаг(&), ` 

č; = е а, == Ela. 
;=1.,- 1 1, n, 
注意 , 2. ef, Ë; 5, 实际 上 还 与 * 有 关 ， 为 简化 记号 , 在 足 标 中 
略 去 了 这 个 x. 注意 前 已 记 必 一 varle, A 
I2—4|«Ci/n,0«C«a,«xC-«co, (3175) 
显然 有 (此 处 ane 和 7 的 定义 见 (3.6) 式 》 
# ivelsess 存在 xs 使 ah, > 27/л} < п/2. 
е 157 4 


AmA 
# {#:1©=02< n; аш„<2,{л М u= 1, ayr} 
‚ = n[2. 
从 这 个 集中 选取 m] 个 元 素 组 成 集 AUS 而 令 A о Д1, 25-55 
п} — A". ПУХ" ЖА 和 4" 中 的 足 标 求 和 :而 定义 


s, = > ШМ п = > ЕМ n das 
S Sw, Sanana ux. 
一 7 > (F one Y . 


引 理 3.14 (1) Ж W, = W,, Wns n=l, 2, 为 一 
串 随机 变量 Wa Wn ODER CA BO Fas Fa. (Ее) 
Фо «C/ V» + 151), BX 11 ®1 有 
PW, 2 c|z| /V n) < C/ N n + |х|*), 
则 有 
|F,G) — Ф(х)| CIV л (1 + |а |8), XE— B) x. (3.176) 
Gi) 设 Wa = aW, b, 0152,» {н}, (0, 2908 
数 序列 ,满足 条 件 
[= П «с/у, |6,1 x CI n, 
XL F. RUF, id W, 81 W s, 的 分 布 函数 , 而 Р, 满足 G) 中 的 条 
件 , 则 (3.176) 也 成 立 。 
iE. ŒE (1). 当 |=] «1 时 ,《3.176) 由 引 理 3.11 推出 。 当 
|z] 宕 1 时 ,只 需 注意 当 # 充 分 大 时 ,x 与 x + C |= | // n Е 
原点 的 一 边 且 |z + C|xl/ M л | 22 |x|/2, 即 有 
E [e " m < ees 


vu 


‚ 128°, 


LCI V т(1 + daa), 

使 用 引 理 3.11 的 证 法 , 即 得 《3.176) sN. Gi) 的 证 明 类 似 , 因而 从 
gi. 

引 理 3.15 ix оф) X || 三 了 内 有 三 阶 连续 导数 рэб), 
X peo) = 0, 4 k= 0,1,2. Bj 

роса |” Aar 

j= 0,1,2, (3.177) 
证 。 以 了 一 2 为 例 。 有 


T T 
| 171g 22d dr -| 17? " e? (uM |dt 
-T 


< ес (fea) + V. oof" arau 


< f ulpan. 


这 证 明了 (3.177) 当 j = 2 的 情况 ,i = on 1 类似 证 明 . 
引 理 3.16 ”在 前 面 引 进 的 记号 下 ,有 
E(A,)! < Cr”, ECAY < Сг, 
当 j= 3, 4, ECAY < C/n. 
证 .第 一 式 归 结 为 证 明 : Ж b < C/s 对 Xe A", 则 有 


Е (Бї Y «c^. (3.178) 
4 


由 Marcinkiewicz 不 等 式 , 有 
ECE” brek P < CE(X" bez» 
< CUECZ"bi (et? — ЕР уу + ("о?у 
© СОУ ВЕС — Есу + 3(X"BEet!Y + (X"bio7y'] 
© С(Сп PER + Cn wY t (Coa $5), (3.1179) 
注意 到 


ES /nFë / nEd < C- / n, 
由 (3.179) 即 得 (3,178)， 引 理 中 其 他 两 式 的 证 明 类 似 。 
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1 
T; 一 E У) A,(8 一 2H) 
а AN п 4 T 106} i 7» 
er 1 < 
T, 一 一 一 > aja e;jeg — eet). 
nd BK jAk | 


则 存在 C: 与 ?及 015 *** 5 Qn 和 Аң» ttt. А, 都 无 关 ,使 
E|T,|'« Ca”, E|T;|* < Cn. 
TE, 记 f = e — ef. 由 Ec, = 0, 
|E2;| = | ECejlCl ejl > 0705] < z *%E $ Can, 
Efl = Е(е,— ef)! < 8[E(e; — ё) + (Ea; yt < Сат, 
"m А 


е 41272 I А * А 22. : 
E| Ti = nd E] У) AQeTEé; + E) 
i=1 X 
. a 4 п Y 
С? [в (> ue Ee) + (>; 2:822) } 
e j21 了 一 1 
" nm 1 
< Cs? [> AME eT E’; + 3at (> ме) 
j=l. і= 1 


+ (> | | 


= Cn 2( Cn” + Cn + Сп“) < Ся, f (3.180) 
这 证 明了 引 理 的 第 一 式 . X 


4 
E | Tal = сае ( > ajareifa ) 
k 


MILII 
ы + 
-+ E( У! ча?) |. (3.181) 
jekel jtk 
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вл 


H Marcinkiewicz 不 等 式 和 Jensen .不 等 式 3 注 意 到 {ai > ГЕ 


k 2, n] ARAFA Уу, 


E( У) ое) 
* 


< 2202 akfk (> ei) ] 

< СЕЙ c/ n. (3.182) 
《3.181) 右 边 第 二 项 可 类 似 处 理 , 从 而 证 明 引 理 的 第 二 式 。 

引 理 3.18 EI(S"(AZY!| < Cín, m —1542,3, 4. 

证 . 先 证 mw 一 4 的 情况 . 易 见 ,可 用 

W, = (X'buetY n a, 

代替 AL 来 讨论 ， 此 处 ХЫ < 1. RERE, "HE A'= (1, 
2，-…，7 一 127%). 有 US 


ЕО) < CE (DY eft) 
hk 
< c [r (XY hotte Е( УУ һе?) 
і» 


$ s[ >” һе) } 


i<k 


AlL + 1, + L. (3.183) 


记 
f; = е — ЕС), h-—u0-—ED. 
4 161 


ЕН Mar.inkiewicz 和 Jensen 不 等 式 , 有 
I, € Сп E(DY bfi) + Cn? | S hE g|" 
= Ca ECE BRY + Са QU ||) 
< Ca? ECE BID) + Cn Vt 
< Co?2/bj e ZECTU) + Cin 
< Сп 02 - СтЕ(е) + Cjn 
=< Cn; (3.184) 
; i-l 232 
L, < СпЕ (> Bier (3: д) ) 
m x=1 
了 一 全 


< Сп УУ МЕС УЕ (> &) 


j>? 
=< Сп? > (CE - Ст) 


ГРА (3.185) 


+ Cre] 
k>? 


| ва(5 е?) } 
< Cr E {> a(S bet) ) 


Ir iz 
十 ке һе?) | 
I 203 223! 


k>2 
+ Cr: >Y ск($ һе) 
*>2 #=1 
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< Cn Уу СЕ + Сп?Сл 
А>? 

< Cr? Ст? 3 cin 

< 6/а. — (3.186) 
H1(3.183)—(3.186) , R043 

ЕС} < C n. f 
这 证 明了 引 理 当 关 一 4 的 情况 ， 严 过 4 的 情况 可 由 己 证 部 分 ， 应 
用 不 等 式 | 
E(CIGD"CALY |l) < ЕСА + EC XA), т = 1,2, 3 

118 2]. ЗАНЕ. 

引 理 3.19 i$ A*C(1, 2, ---, n} B. 3E(A*) = [br] 
Eb 0 < <1,0 <, <1. 记 ste Ун, Muh 5) Ж 
示 对 AT 中 的 足 标 求 积 ， 则 {% нэ n» i]: 

| Eexp (35%) | = exp (— атг), 
| ES exp Gr52)| < Со? |r| exp( un”), 
| ESPexp(i152)| < €n^"(1 + £?Dexp(— un"), 
| ESP" exp (3152)1 
< C(n?" + £ 1?7)(1 + |rP)expC— ао"). 

证 ， 第 一 式 容易 由 引 理 3.7 得 出 ， 其 余 三 式 证 明 类 似 ， 以 第 

四 式 为 例 , 握 引 理 3.7, {тә ps ns г}: 
LESE exp (35%) | 


=ç 2 *⁄2exp(— pun 7r) {z*z gf 
+з У) Е |Е&,(ехр(и М п) — 1) 


Б: 
ams 


* P3 II | EZ, Cexo Cit] An) == Dil 


jekel} Z=j,k,l 


« n ??ехр(— pn t) | Ca + ga п” 


+ с 05) sl 


* 163» 


=< C(n^!7-* + na) + |2) ехр C— из”), 
引 理 3.20 Ig, н» n, th: 
ECS)” exp (i152) [exp C—iA5) 一 11! 
« Cn + drPImexpC— am М n + Crins 
m = 0, 1, 2, 3, 
dE. Um=3 30]. 由 下 面 的 证 明 不 难看 出 : 可 以 用 W= 
bie/ М nd, RE А, 来 讨 沦 , 此 处 УР} 1. dd Zi 一 
bf. ЗЕ 3.7 ЯП 3.18, {ns ps nat): 
| ЕС5)'%ехр(и5„)[ехр(—# W,) — 11! 
< || EGLOW,exp(152)] + сРЕС5, Pw) 


x nr BH ECW „exp (#zS) 
j 


+ 3 MY ЕСО W ,exp Gr8;)1 


Pk 


+ SY AEQ nexp Cirsa) }+ CPÍn 
} Ж КЗЕ1ЗЕ} 
А д) + pG) + JG) + Соја, (3187) 
和 注意 到 EZ,—0, Es < оо, 以 及 |7;| < [25/12 2715; < 


Мп, Ë 
YEZ < С, 
УГЕ < 4/ z ЕЦ. РУ < суя, 
УГЕ [EZ | < 2т^Е| |> У]Ь,| < Ca^, 
X'E|Zit < CX' ibd «Cv n. 
Оң «Мота 
мо < conia [1727 27 в\йлї! 


Farc» al 
«ca yam [xz + У ElGPEZI 
I 
» Jó е, 


+ Уу Eu | EZ,[ exp Get М а) — 11| 


iM 

+ У ЕД |']|Е7[ехр(и f a) 
радаў 

1101820 ерби n) — 11] 

< Catre {с Мп. + Cn 

+ CL Еро УЕ] 
s 

+ € YEGO EIZE} 


` < Cn? re^? l Cn + sz Co^ C n 
n 


十 eec cnc M a y | 


= Cn CH + ltl Ye, (3.188) 

类 似 地 ,可 得 当 |z| < V wy 时 有 | 
` JA) € Cn ^L 十 ye, (3.189) 
J (2) =< Сач + 18e", . (3190) 


由 (3.187) 一 (3.190), 知 引 理 的 结论 当 m = 3 时 正确 。 其 会 情况 可 
类 似 证 明 . 

引 理 3.21 Е {(5, — ADecb Gr, — A) ~ Е{(5,— 
буе" ба}, | | 

UE. МШЕЗ: 对 m = 0,1,2,3, 有 

ESTA" expGit(S, — ADD) ~ EUSTCAL) nee). 

(31191) 

Dm = 2 为 例 、 用 引 理 3.16,3.18 及 3.19, EEEXEER |] CA n 
而 得 到 的 | 

CEIS PY” < CE sz] ^ 

< Ci»? X/ Et] + n7 3(X EGY 
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=< С{п?Ст + a Су} < C 
DLE BRE V na ЮЖ 
ЕТС PAL ef (einn; — 1)11 
< [ECAP ELC, Y 571] 
s Cn «e| + |e P)exp(— un 72), 
| ELS;57 Are (ei^; — 1)]| 
< IEC SICAP | ECSz ел) | 
= Cn" Pexp(— рт), 
| Е[ (5,)ФА ze (eia; — 1)]] 
< [| EGSZAZY | Ee; | 
= Ст 12| ехр(— pn n), 
863.192) —(3.194)41,4 |z] < V na 时 ,有 
E[S} Ape (еа — 1)1] 
= Cn |.| + 101) ехр(— un P). 


(3.192) 


(3.193) 


(3.194) 


(3.195) 


463.195), [81121505 — "0 Ж BAS. 191) 4 m = 2 时 成 立 ， 


引 理 3.22 id 
d. — 1РЕ(5„ — AL) + 3: — ђе, 
ШП 
PE[CS, — А,)е =] ~ prle). 

证 。 不 难看 出 ;此 引 理 的 证 时 归结 为 : 
PE(SLeU) ~ [PECS + 3: — Bye ^, 
E(S2(AL)" "ену ~ E(SZ(AP7"]e7"^^, 

m = 0, 1, 2, 
为 证 (3.196), 注 意 
РЕС.) diei n PI Egesan) 
+ 3(» — D EQ env) 
T (z — Dn 一 2)E(G E be) 
£ AG) + JO) + AG. 


id hle) = Ee», MUH S 253238 1.32, K Uns лә th: 


.+ l66.* 


(3.196) 


(3.197) 


(3.198) 


IMMO SS е7 | =< Crepe’? 
此 式 与 引 再 3.7 结合 , 知 t л» m (EME к < E): 
ЛС) 一 nPE) eA] 
=< x | EEI — EtDe7]] + EM PS — е} 
=< Ca? |: E|; Gi — EG) | ce + Cole e 
Co |.| + [Pe ~ 0, 
因此 
AO ~ n7 PED, (3.199) 
其 次 ,有 
(Ete Ya) 一 ijd n | 
= [ELG CEE — 1— im] V )H 
«PE |, 2а < CP ln, 
故 当 | SPI TE 
30 一 1) pf, I J 
|z 一 RE [ер (a b» INE Jl 


j*1 
| 


= |307 а — 1) LE реи) 
НЕЯ, ма ]E [аер (г > ым») 
E c»""PEE|E EC 2; ым») 


«Cn pe Hn (3.200) 
改 由 (3.2007) 式 ,以 及 


wi |E [Gi ое (й > 3 


< ЕҢ — 11e n 


AG) ~ Жел) Е [ei >; ым» )| 


i*l 


за (узо (яа. 
f n al # ') п sexp( 25 d ) 

~ eh, (3.201) 
类 似 地 ,得 到 

"ORAT n (3.202) 
9С3.198)—(3.202)19(3.196). Е (3.197). т=2 为 例 , 其 
ERRA. ihi, Mu FS S АП Н = aey 
{М wd, (G AL 来 讨论 ,此 处 Уо a. dd Za 一 аке, 
(00 ДОЗИ pne) 
= (nd, yx ECE Z en) 


т Е >; EGG GE Z es") 
会 лб) + MO (3.203) 
由 引 理 3.19, (р gs n> т}: 
- G^) 31 XY EGizie 0] 
ibo satz] 


j Rai 


сп У) > EGC / V. п E| Zac 


p 


x (dV nE, Ztl em 
+ Сп? > Е| 7,\. Qeli n JE Сает" 
=ç Сл (т? + ма |: Dem] | 
| = C” del + Pje, А 
由 此 可 知 
JG) Gra.) > ы) akEC Gje еу, (3.204) 
定义 вд а= 1/2 或 1 i= imas ТАЯ. 由 E¿é< со EH 
> > ZEGE) < Са. 
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之 ас + 15001 < ст". 


BOE fa = Г ЕО), WD || «BD 
0а.) У) Уу a Eje) 一 EGIet)e 7^) 
i k zi 


< Са > У ak | ECfue^9) |. 
i k 
+ Ca У У ЕС) | E tsa — e_#0l 
f * 
«CU D УУ СМ п)е{Е1ви@)  COfal e 


+ Cs Cs (C |i n) eon 
< Сп: $7 > eiE Let C15] + Ha D le 
十 б-де ` 
< Ca^ + |: |?) ете, | (3.205) 
由 (3.204) 与 (3.205), 得 
HO ~ бау" Б) PY AEGEE), (3.206) 


类 似 的 讨论 证 明 ; 
J.G) — Gg, 2 SY aja EQG F E Get), (3.207) 
ikk 


最 后 , ЕҢ(3.203), (3.206) 91(3.207), 163.197) 24 m = 2 时 成 立 。 
引 理 证 毕 . 
(ж) 定理 3.10 的 证 明 令 
а == l, a= ECS, — Аз), 
a, = E(S,— A; — 1, 
a, = E(S, — Ас)? 一 3E(S, — AD), 


DRESS UN TEE ETE E (3.208) 


G) 一 D, aliteka (3.209) 
k-o 


ms) = Elexp(ir(S, — A;))1. (3.210) 
E: (3.208) 9) W, 
dA C — e.C)| =< Ca (| | + (677^. 
d.) 的 定义 见 引 理 3.22, HORSE 3.21 和 3.22， 得 mP) ~ 
d.) ~ AP (D. MEE x > O 与 2 无 关 , 使 
[T AMPO — &PCD < ciV 
ХЕ mj(0)-—2/(0), ;-—0,1,2, 由 引 理 3.15 知 
„=? 一 如 (Da < c] n s 
j= 0, l, 2, 3, (3.211) 
由 引 理 3.19, 3.20, {7 дул» ғ}: 
(E [e #а(е—ил„ — 1)]1 
- үг DIA 


B л 
ЖАП. Беба ~ e~ (Berry-Esseen), Щй тыб) < 677? — А, GD 
即 存在 Сі => 0: 使 


[O үйд ha CIV a. (3.212) 


-vnan 


2 
(жй + © ы ратар) ~ 0, 


现 令 
MC) = P(S, ms A; rf), 


HG) 一 > С 10) канфе) 1. (3.213) 
м. ЗЕЕ, H, 可 微 且 有 界 变 差 于 R', М.С соу 一 Н.(+ со), 
| Ixl1204, G2) — Н.) < co, B. |Н„б)| < CI Q + 


li); Ж SE — SEXE BÉ. 1.30 ,有 
|Ma) — H,CG)| 


. 170 * A E. d 


саз" SS _ limo — Acta 


BESIT 


+Í т 1478.0 la + т 1, (3.214) 


ТАУ лт 


此 处 
B |” {ем — HG). G3215) 
由 第 一 章 定理 1.38, 并 注意 到 (3.211) 一 (3.215) 诸 式 , 得 
[М„(х) — Н, Cx)| 
«ca-Isb?l[, 1171909 — 0914 


nm 


Е > | |z] 0 Со) — 0) ldt + п} 
оо, (3.216) 
H1 (3.208) & (3.213), WL | HC) — C) | < C,770 + 61x07, 
这 与 (3.216) 式 结合 ,给 出 
|Ma) — PE) < С, + Ib. (3217) 
又 据 第 一 章 的 定理 1.29, 有 
IPCS, < x) — O)| < Cr 二 zl) (3218) 


因为 |4/4—1| < C/ =， 由 引 理 3.14 知 : 若 记 
š, w b» EM na, P 
А, = 2 > (3 — ҮТҮ? 


#= | 


ы -2 D (3Yest) а, 
ЖИЙ, 记 5, 一 А, 的 分 布 函数 , 则 仍 有 
LM, GO) — 662] < Cn?" + |+|) 2, (3.219) 
[Р(, < x) — Ф(х)| < Co" "(1 + (|), (3.220) 


s 11» 


Р. 
ор = Je 2 > (> 2] : 
则 有 | | 
$,— A, — А, << QU e$, 
由 引 理 3.16, 对 || 221,9. 
РСА > |z] J/ лу < C's ЕСА) 
S Cr rt Cn 1201 + |z1) 2, (3.221) 
故 由 引 理 3.14 及 (3.219),(3.220) 式 ,有 
СРСР < z) — (| Ca" + |z])”?, (3.222) 


4 Cosi 的 定义 见 (3.6) 式 ) 
D = B (1— xus — oo) 


H=] Ue 
^ 全 1 z (2 с) 
j v а jzi i 
UNES E ОТЕ 易 见 
对 一 上 
105 —О | < |+, — $,|] + IT; cT. (3.223) 


此 处 
1 < 
T а 


T. 一 TY > > алыр Зама (e;ek — efek). 


ЕЗ 
由 引 理 3.17, 对 |+| > 1, 有 
POT + TI) > dxl/ n) ELT, + TZM 
"Cn Ux Cg 12(1 + |< |), (3.224) 
XH 
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If, 3. 5) e — sp 


1 Ld 
— — Fot m 
« US. > P Ес Са, (3.225) 


故 由 引 理 3.14, 及 (3.222) 一 (3.225) 诸 式 ,得 
[РО < x) — Plej < Cn "(0 Jel (3.226) 
令 


\ < 2 Yl 
T 21 Gre ), 


o? e у (я Gi — 5 


- Z [р d—G- е} 


— p a — aged - G — e] 


1 r * 
idi 


Usus Gaga Co Cwe 


易 见 
09 < 09 < T, + ra] па, (3.227) 
虫 第 一 章 定 理 129 8 PC, < х) 96) Cn H 1x17. 
这 与 (3.226) 和 (3.227) 式 结合 ,并 使 用 引 理 3.14, 即 得 
[PCOS < r) — @(z)| < CaTa + |z|)?, (3.228) 
最 后 ,有 
ө, — о? EY 


= ——— = ——  M— 0% 
Vete G= Dm 2. (3.229) 
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(V aan — Ou ао) Lech n. (3230) 
:B(3.228)—(3.230) ,再 用 引 理 3.14, 即 知 (3.174) 式 对 充分 大 的 = 
和 一 切 * 成 立 ,; 风 而 对 一 团 * 和 > 都 成 立 。 定理 3.10 证 完 . 


$3.5 о; 的 分 布 的 浙 近 展开 


(一 ) 引言 和 主要 结果 ”前面 我 们 讨论 了 当 x 一 co 时 ,误差 
方差 估计 吧 的 标准 化 oi 的 极限 分 布 问题 ,证 明了 在 一 定 条 件 下 ， 
ci 的 分 布 以 Обн) 的 速度 收 伍 于 标准 正 态 分 布 Ф. 可 以 把 8 
看 作 是 这 的 分 布 G。 的 “一 级 近似 ”。 由 于 接近 的 速度 只 有 07^ 
这 样 的 数量 级 ,除非 = 很 大 , 用 060 作为 G G0. 的 近似 值 就 显得 
比较 粗糙 些 ， 如果 能 够 把 晋 余 GG) 0G) 的 主要 部 分 0О,б)/ 
A ЖЕН Ж CO GO 也 可 以 与 > 有 关 ); 则 0G + Об) М п 
作为 Gu(x) 的 近似 ,其 接近 程度 将 很 有 改善 。 在 一 定 的 条 件 下 , 剩 
余 Gu(x) — (060) + OGN ^ ) 将 以 OaD 的 速度 趋 于 0， 
因而 又 可 把 它 的 主要 部 分 0:(x)/” 提出 来 。 这 样 作 下 去 ,只 要 条 
件 允 许 , 我 们 将 得 到 这样 一 个 展开 式 : S 

G,G) = 6G) + 0,G)/V п + Ою я Res 
БОА Ак, (3.231) 
这 叫做 С.х) 的 渐 近 展开 。 这 种 展开 式 的 意义 ,与 通常 的 级 数 展 
开 ( 如 等级 数 展 开 , 三 角 级 数 展开 等 ) 不 同 。 主 要 是 : 〈3.231) 5 
的 级 数 ,对 任何 固定 的 4, 通常 都 不 必 收 化 因而 (3.231) 中 等 号 的 
意义 ,不 能 作 平 常 的 解释 .实际 上 , 依 我 们 上 面 交代 的 (3.231) XX 
的 来 由 , 它 的 意义 是 说 ,对 任何 (国定 ), 当 » 一 co 时 ,剩余 
GCE) — (62 + Q.GO IV + ОМ n) 
以 OGADA 的 速度 趋 于 0. 

相应 于 中 心 极限 定理 的 ， 即 标准 化 独立 随机 变量 和 的 分 布 的 

渐 近 展开 通常 叫做 Edgeworth 展开 。 这 在 通常 的 教科 书 中 都 有 所 
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讨论 . 例如 可 参看 [19]， 严格 的 理论 可 参看 [17]。 奸 使 在 这 个 
相对 说 来 是 最 简单 的 情况 ， 整 个 理论 也 是 很 艰难 和 复杂 的 .在 数 
理 统 计 中 所 全 到 的 统计 量 , 一 般 都 不 具有 独立 和 的 形式 ,情况 当然 
更 为 复杂 《如 本 章 讨 论 的 锅 )， 近 几 十 年 来 , 有 一 些 学 者 从 事 过 这 
方面 的 研究 工作 ,但 直到 上 生前 为 止 ,还 只 得 到 一 些 零 星 的 结果 .每 
个 刁 体 情况 的 研究 都 要 用 到 针对 这 种 其 体 情况 的 特殊 方法 ， 

在 这 些 工作 中 ， 我 国 许 宝 又 教授 的 工作 [1LL] 是 最 早 的 。 在 
{1411 中 , 许 教 授 讨 沦 了 一 般 线 狂 模型 (3.1) 的 一 个 特例 , 央 p = 1, 


x 一 x 一 … = d. ҖЕ] o2 就 是 通常 的 样本 方差 2j Ot 4 
[бо 一 1). 许 教授 研究 了 它 的 分 布 的 渐 近 展开 、 得 到 了 彻底 的 结 
果 , 可 表述 如 下 : 

ËR е, ec， … 为 一 帅 独 立 间 分 布 的 随机 变量 ,五 c, 一 0, Ее 
1. 记 a = Ez, v= 3, 4, c. BARDEN К> 4, 有 aac 
co. 又 ec 的 分 布 ЕС) 在 Lebesgue XFA GERAI BI Р(х) 


的 Lebesgue 分 解 中 的 绝对 连续 部 分 不 消失 、 记 可 一 ein, 
i=l 


"a = 2; — &,)'/n, 而 


Gala) = PO я (дь — /Vm — 1 x x). — (3232) 
MA G,(z) = BCx) + 9,G + R,GO, Eh Ф„(х) 是 (077 (a), 
»1,2,--:3(& 一 3); 的 线性 组 合 ,， RUE LESER o7? t 
(v =j, +, k— 3), mm Br IX (k Т k, Озу "** $ O2k—2< x 
Qín (7n, 33$ k= 4,5, 6 
Ogn ARTD, 当 & m2 
其 中 Q, 为 依赖 于 不 及 e ron E. 

在 文献 [20] 中 、 我 们 把 许 教授 的 上 述 结集 推广 到 一 般 的 线性 
模型 ， 本 节 将 要 介绍 航 这 一 结果 还 只 是 初步 的 ， 因 为 它 对 试验 点 
列 加 上 了 较 强 的 限制 ,由 下 文 的 (3.233) 式 .在 前 几 节 的 结果 中 我 
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\к„(х)| <Í 


们 注意 到 一 个 事实 , 即 о» 的 大 样本 结果 多 与 [r] 无 关 . 这 使 我 们 
FARHA: 关于 on 的 分 布 的 渐 近 展开 问题 ,有 朝 一 日 或 许 能 达 
到 与 (<) 无 关 的 结论 。 本 节 的 叙述 根据 文献 [201. 

海 虞 线 狂 模型 (3.1)， 假 定 : 

(1) ese: 独立 同 分 布 ， Бе = 0, Eci- 1. 

(i) 记 mw 一 Eci， 存 在 整数 克之 4, 使 an< co, 

(ui) e 的 分 布 按 Lebesgue 意义 为 非 奇异 的 (意义 见 前 述 ). 

(зу) 存在 常数 4 ,使 若 将 oa 表 为 (3.6) 式 , 则 有 


S ад < 4/п, k=l, 2.a n; 
j^l 


SEES _ (31233) 
5 W 
жене чеш 
令 
n.n — у)о%{п,» (3.234) 
并 按 (3.232) 式 定义 Grle). 我 们 在 [20] 中 证 明了 : 
С„(х) = (x) + Ф„(х) + Ё„(х®), (3.235) 


其 中 Ф, (а) 为 (0?(), >= 1. 3( — 3) 的 线性 组 合 , 系 
数 是 某 些 量 的 D 倍 ， 2 一， £ — 3, 这 些 量 只 依赖 于 k, 
Ts буу tto On- М { аша» 1<;/;=< r; 1< k =< n). X 


[R. CO] E M 4px IG 2r, 
п) = К 
Ogreta), Ш k > 2(r + 2)/r, 
(3.236) 


此 处 Qu. 为 只 依赖 于 &, + 及 ei 的 分 布 的 常数 . 
关于 (3.235) 式 中 的 至 ,(x7， 可 更 细致 地 描述 如 下 ， 记 


еМ l, lat, = (Say, 


(3.237) 
Be Elei — 1|*/(о,—1)%%, Ba = Elelt. (3238) 


+ 126, 


T» M 2 (1— p), j=0,1 (3.239) 
时 ,有 
„ 2 fo ej ЕЕ 1 ғ 
。 ud ps ve) 
H = Xp f; (7 Pot 2 пын) 
Ta Paho» hs ** » 4) (1 ses dst, inh. UT ^g iy 
十 907—5 рт gu DACP, 
(А2) 1—0 ҳу, 3 243^ 
+ peopemes(——, Za) (3.2417 
其 中 


aU; ceig t) 


рена 

而 dra ts; ve. it) Bu 
| pee ZG E - (3442) 
的 项 的 和 ， ЕД| =< 4,5 Ar ЖФ, 为 只 与 区 有 关 的 常数 ， tts 


202 9); (3.241) 


i-1 


1-3 k—3 
m 为 非 负 整数 ,1 < D> lm < k — 3, > im; == v, v=l, +-+, 
7 一 1 i=1 
k — 3,X 4, = l 25 Ass H Au; 为 变量 
1=1 


tle Ома — + 6 У на 


的 » 阶 半 不 变量 . 
以 ws Qs stt» у) BERERA pror eot) 所 确定 的 


ЕЖОВ. 在 due. cci. н) 中 ， 将 每 个 П Guy 用 
(— 125 6 „дуу-дуу Ка б, (узэге у). 
< 


NT 


H,(x) 一 Í. * iya ле ue: АЫ Э) 
t8. y dyo dy,. (3.243) 
把 H, ВЕБ а 的 多 项 式 , 取 到 wn 六 一 项 为 止 ,这 部 分 的 和 
就 是 (3.235) 式 中 的 Ф(а) 十 (е). 
特别 ， 当 ”> 一 1 时 ， 上 述 结果 作为 特例 包含 了 许 教授 的 结 
Ж. 
如 前 所 述 * 这 个 定理 的 证 明 相当 转 难 并 且 复 杂 : 因 此 我 们 不 打 
算 在 此 介绍 它 的 证 明 。 如 要 了 解 这 一 证 明 ， 可 参看 文献 [201. 在 
些 , 我 们 仅仅 指出 ,要 去 掉 对 试验 点 列 所 加 的 任何 限制 而 不 加 上 其 
它 同样 性 质 的 限制 也 次 非 易 事 ， 例 如 ， 车 使 用 多 维特 征 函数 的 展 . 
开 及 其 反 演 ,以 及 Esen 提供 的 基本 不 等 式 ， 而 要 去 掉 本 节 加 之 
于 试验 点 列 的 (3.2337 式 ， 则 在 (3.239) 式 成 立 的 条 件 下 ,就 不 能 得 
出 多 维特 征 函 数 的 基本 展 式 (3.240), 其它 也 就 无 从 谈 起 .如 果 直 
接 对 一 维特 征 函数 Eexp UrV/ n (y. — 1) /Ve 一 1} 进行 展开 ， 
则 当 д> 4 时 , 汗 算 是 极其 繁琐 的 ， 甚 至 是 难于 进行 的 ， 即 使 在 
k= 481 Ec « оо 的 条 件 下 ,为 要 得 到 所 要 的 结果 ,也 必须 加 上 
一 些 难于 验证 的 其 它 条 件 . 其 实质 性 的 困难 阴 乙 统计 量 的 渐 近 展 
开 是 类 似 的 ,我们 要 处 理 的 都 是 一 个 同 分 布 独立 和 与 一 个 非 独 立 
和 的 于 扰 项 之 和 ， 在 高 阶 矩 (* > 3) 的 场合 ,这 一 干扰 项 将 起 实质 
性 的 作用 . 但 是 ,我 们 仍然 希望 ,这 个 轩 难 最 终 是 会 被 克服 的 . 
我 们 在 研究 05 的 渐 近 性 质 的 过 程 中 ,受到 许 教授 的 基本 文献 
[113] 很 大 的 启发 我 们 得 册 的 一 些 结果 是 许 教授 在 这 方面 的 工作 
的 继续 和 发 展 . 
® * x W 
[11 гез 线性 模型 中 误差 方差 估计 的 相合 性 ， rh BI 32, 1101979), 1039-- 
[2] к L. J. On the Asymptotic Theory of Fíixed.Size Sequential 
Confidence Bounds for Linear Regression Parameters, Ann. Math. 
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第 四 章 ”线性 模型 参数 估计 
的 容许 性 问题 


仍 考 虚线 性 模型 

Y; = х8 + es i= 1,:-+., n. (4.1) 

е, 有 均值 0， 方 差 总 ， 在 前 两 章 中 , 我 们 研究 Яп о? КИКИ 2, 和 
o 的 性 质 时 ,都 是 在 样本 大 小 = — co 的 情况 下 去 考虑 。 因 此 称 为 
大 样本 理论 ， 这 种 类 型 的 结果 当 样 本 大 小 4 很 大 时 ,近似 地 可 以 
使 用 。 由 于 目前 大 样本 理论 中 。 绝 大 多 数 结果 并 不 附 有 切实 的 误 
差 界限 估计 .因此 在 磁 到 一 个 特定 问题 中 特定 的 样本 大 小 时 ， 我 
们 无 法 确切 说 出 ， 这 样 的 样本 大 小 是 否 已 使 大 样本 理论 可 用 .这 
是 大 样本 理论 的 一 个 重要 缺点 .但 是 ， 在 承认 这 一 点 的 同时 也 应 
看 到 ,不 能 以 此 否定 大 样本 理论 的 重要 意义 . 一 则 由 于 ,从 大 样本 
观点 提出 的 一 些 绕 计 方法 往往 有 其 直观 上 的 合理 性 ， 在 无 其 他 更 
好 的 代替 方法 时 ,这 类 方法 提供 了 一 种 可 能 的 选择 ,而 且 , 有 些小 
样本 理论 就 是 从 基于 大 祥 本 观点 提出 的 统计 量 上 面 发 展 起 来 的 。 
举 一 个 最 简单 的 例子 : Ж ОХ, oos, Xa 为 抽 自 Мба, о?) Ж, 
要 检验 a 一 ao。 在 0 已 知 时 , 自然 地 取 检 验 统 计量 W n (X— a.) / 


в. 当 未 知 时 ,以 s (LM 2), – XX) 估计 。 而 取 检 


验 统计 量 1 一 a(R- ao)/S。 在 Student 没有 发 现 * 的 精确 
分 布 之 前 ,人 们 只 好 近似 地 认为 : 有 正 杰 分 布 ,这 就 是 一 种 大 样本 
理论 。 这 个 检验 ,不 论 其 极限 分 布 , 单 从 直观 上 看 也 是 合理 的 , 而 
Student 之 所 以 会 去 研究 的 精确 分 布 , 也 可 以 说 是 因为 大 样本 理 
论 提 供 了 这 个 问题 ， 此 其 一 ， 另 一 点 理由 是 ， 尽 答 一 个 统计 最 或 
统计 方法 具有 某 些 大 样本 性 质 还 不 足以 成 为 其 在 实 东 应 用 上 的 优 
品 性 的 充足 根据 ,但 由 于 大 样本 福 质 要 求 的 条 件 较 少 (主要 是 与 总 
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体 分 布 关系 很 少 ， 因 而 常 有 所谓 “distribution-free” 的 性 质 )， 由 
此 ,从 友 面 说 ,车 一 个 统计 方法 不 具有 某 些 普通 的 天 样本 性 质 ， 仿 
duda rhe ,我 们 就 很 准 入 入 ,在 样本 大 小 不 杰 天 时 ， 它 会 有 良好 的 
表现 所 以 我 们 说 ,大 样本 理 沦 的 意义 不 能 低估 . 

当然 ,大 样本 理论 在 绕 计 中 受到 如 此 的 注意 ,主要 原因 还 是 在 
于 ， 用 目前 已 知 的 数学 工具 所 能 得 到 的 小 样本 结果 实在 太 少 。 谈 
到 “小 样本 理论 "这 个 名 词 ,一 般 并 无 明确 的 定义 ， 总 的 说 ,如 果 一 
个 统计 闹 型 中 样本 大 小 固定 不 变 ，、 则 关于 这 种 檬 型 的 任何 确定 的 
理论 结果 ,都 可 以 理解 是 小 样本 的 (因此 ,大 ”小 ”样本 之 差别 ,不 
在 于 样本 的 大 小 ,而 在 于 样本 大 小 -co , 或 保持 不 变 )、 一 些 初等 
教科 书 上 把 小 样本 理解 为 守 求 问题 中 有 关 统 计量 的 精确 分 布 ， 这 
是 一 重要 的 方面 .但 也 可 以 把 样本 大 小 酒 定 时 ， 统 计 方法 具有 的 
某 些 竹 质 列 和 人 ,如 估计 的 无 偏 竹 可 算是 小 样本 性质 ,而 渐 近 无 偏 性 
则 是 大 样本 福 质 ， 佑 计 的 Minimax 性 质 、 检 验 在 零 侵 设 集会 上 的 
相似 性 与 不 变性 等 ,都 可 视 为 小 赃 本 性 质 ， 本 章 所 要 讨论 的 ,线性 
模型 中 的 参数 估计 的 容许 竹 ,可 视 为 一 种 小 样本 理论 . 

本 章 中 总 假定 损失 函数 为 平方 或 正定 和 半 正 定 二 次 型 .关于 
容许 性 ， 可 以 在 全 部 估计 类 中 考虑 ， 也 可 以 在 一 定 的 估计 类 中 邯 
Ж. 对 8 的 估计 来 说 ， 一 个 自然 的 估计 类 是 线性 估计 类 .关于 一 - 
线性 估计 在 全 体 线性 估计 类 中 的 可 容许 性 ， 目 前 已 有 了 较 完 整 的 
结果 。 Rao 的 文章 [1] 是 到 那 时 为 止 这 方面 工作 的 总 结 . 关于 线 
性 估计 企 金 体 估 计 类 中 的 洒 容 许 性 , 当 随 机 误差 e, 服从 正 态 分布 
时 ,已 有 了 一 些 研究 。 对 其 他 博 况 则 所 知 其 少 。 EF с 的 估计 ， 
一 个 自然 的 估计 是 二 次 型 估计 类 .这 种 估计 类 是 我 国 许 宝 又 教 押 
开始 研究 的 。 早 在 三 十 年 代 , 他 就 在 12] 中 考虑 了 方 莽 的 二 次 型 估 
计 类 中 的 最 优 无 偏 估计 问题 。 以 后 Rao 等 人 继续 了 这 方面 的 研 
зс, 但 关于 其 容许 福 间 题 ， 则 译 今 在 文献 中 尚未 见 有 公开 发 表 的 
结果 。 至 于 二 次 型 估计 在 整个 估计 类 中 的 容许 性 问题 。 即 使 在 随 
机 误差 服从 正 态 分 布 时 ，。 也 所 知 很 少 ， 对 其 他 分 布 就 更 不 用 说 
Т. 


61. 


本 章 共 分 五 节 ， 前 三 节 讨 论 问 妇 系 数 的 线性 估计 的 容许 竹 问 
题 ,后 二 节 讨 论 误 差 方 差 的 二 次 型 估计 的 可 容许 性 问题 ， 


541 回归 系数 的 线性 估计 的 
可 容许 性 I 在 线性 估计 类 中 ) 


(—) 预备 知识 ”以 9 记 未 知 参 数 , Y 是 观察 值 向 量 (从 下 文 
可 看 出 ， 并 无 必要 假定 Y 取 值 于 欧 氏 空间 )，Y 的 分 布依 赖 于 6. 
在 本 节 中 ,我 们 只 涉及 有 关 分 布 的 一 、 二 阶 矩 .因此 没有 关于 Y 的 
分 布 的 任何 特殊 假定 。 设 gC(6》 为 一 待 估 的 mw 维 向 量 函 数 ， 如 用 
4(х) 估计 gC9), 损 失 取 为 

L(g(8),4(Y)) = (CY) — gY B) — g(6), (4.2) 
此 处 BB 为 一 非 零 的 w 阶 半 正定 常数 方 阵 . 

为 精简 文字 ,我 们 把 т) 为 g(6) 的 在 损失 函数 (4.2) 之 下 
的 容许 估计 ”一 语 , 记 为 CY) ~ g(. X B 一 了 , 则 进一步 简化 
为 4(Y) ~ g(C6). 

引 理 4.1 若 3 为 任 一 方 阵 , 致 B = 55, 则 (Y) 79 800) 
的 充 要 条 件 为 54(Ү) ~ Sg(9). 

证 。 充 分 性 : ik 54(Ү) ~ Sg(0). Ж a(Y) ~ g(0) 不 对 ， 
则 存在 aY), # 

EM (а‚СҮ) T g(O)) B(4 (Y) S g(8)1 
< EL) — g(6)) B(4(Y) — є(8))1 (4.3) 
对 参数 空间 @ 中 任 一 9 成 立 ， 且 不 等 号 至 少 对 @ 中 一 个 h Жїзї. 
《4.3) 可 写 为 
Esllsa,KY) — SCO? < Eol Sa) — Sg 

对 一 切 9€ Ө 成 立 , 且 不 等 号 当 6 一 0, 成立. 这 显然 与 S4(Y) ~ 
5200) ЖД. 

必要 性 . Wb (У) 之 g(9)。 用 反 证 法 , 设 sa) ~ 5000) 
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KRE. WEE), 使 | 
ЕСУ) — Sg(0) < EollSa(Y) — Sg(OP (4.4) 
对 一 切 0€ 0, HAS S 40 FTA EB 成立， iP 
$CS'8) S', Вр s E921 & ИТУЕ BER Е - Z RIA E ж de Е, 
则 有 
Il&CY) — sgCO) 
= ECY) I'U — PY) + liPRQY) — Sg). (4.5) 
由 (4.4) 和 (C4.5), 知 对 一 切 9 有 
FolPECY) — 5600) < EollSa(Y) — Sg(8)]? (46) 
且 不 等 号 对 0 = 0, 成 立 ，(4.6) 可 写 为 
Es[ (SCY) — g(6)) B(&(Y) — &(@))] 
< Eol (4(Y) — (6) B(4(Y) — (801, (47) 
此 处 ЖҮ) = BSAC) 此 式 显然 与 4(Y) 之 g(6) 218. jk 
证 明了 必要 性 . 


O 引 理 42 3 Bs 之 0 而 ДҮ) 学 8C6)， 刚 对 任意 的 B2> 0 
有 aY) ~ 609). 
WU. 简 记 4(Y) 为 4, 余 类 推 .由 引 理 4.1, 有 
d Mg(8) € BPa ~ (Ө), (4.8) 
又 ,与 引 理 4.1 类 似 的 证 法 ,证 明 ; | 
2,00) <=> BYa I, КӨ), K = BIBBI”. — (49) 
故 本 引 理 归 结 为 证 明 (4.8) 与 (4.9) 的 右边 等 价 。 这 无 异乎 说 在 引 


理 中 可 设 Bs 一 7。 用 反 证 法 , 设 d~ 600), IH 2 g(9) 不 对 ， 
则 存在 估计 4, Ж 
Eel (a, — #(Ө))' В(а, 一 8C9))] 
< Es[ (d — g(0)) B(4 — g(05))] 
对 一 切 9, 目 不 等 号 当 9 — ЖЛ б, Ёз. DL ла B ARARE 
根 。 并 令 Е= 2 B 《此 处 设 4 疡 0。 否则 B = 0, БАН), 
则 


* 183 。 


Ea[(2, — g(0)) FC4, — g(0))] 
< Ealla — g(0)) F(d — 4<9))1 
Kt—58 8, 朋 不 等 号 当 8 = Ж 0, MR. 4 
te а. = d + F(d, — a). 
H F =< I (B: 工 一 下 为 非 负 定 阵 ) 知 F2 = 六， 因而 
Epl, — &(Ө)\? . 
= Ea — (00) + Eol Cd, — aY F*(2, — 4) 
+ Ealla — g(0))'F(2, — 4)] 
+ Eo[(d — ay F(a — g(8))] 
< на — &(Ө){? + Еа, — dY F(a, — 4)] 
+ E,[ (4 — g(8))'F(a, — 4)] 
+ Es[ (d, — dY F(a — g(0))] 
= Esl4 — g(8)I + Es[(d; — g(60)' Е(а, — в(8))1 
— Eel (d — g(8)) F(a — g(0))1 
| < Eld — g(8)|P 
对 一 其 9， 且 不 等 号 当 Ө=6, у. 这 与 4 ~ gO) Ф. 
БЕЊ. | 
BAI G) Ж 4(Y) ~ g(0), g(9) 为 如 维 ， 则 对 任何 常数 
Ж S: K X m, A SaCY) ~ $е(@), 
GD 35 SAY) ~ Se(0) mi S^ 存在 ; 则 20У) ~ gO. 
这 是 上 面 两 个 引 理 的 直接 推论 ， 
引 理 4.3 CREER HE ЛШ) 设 A; Хх m, WifgitAWriE 
交 阵 了 和 m 阶 正 交 阵 О, 
«-r(19)o- nao, 
此 处 А = diag(h.4. A) > 0, r = rk(A), 24-2 RC 
的 非 9 等 征 根 。 忆 为 王 的 前 上 列 构成 的 矩阵 ，@: 为 的 前 z 行 构 
ВВЕ. 
Ш. ДА, etes As 9.755,09 dd AL 的 全 部 特征 根 ， 
六 ;让 为 相应 于 它们 的 特征 向 量 ， 且 选择 之 使 成 为 К^ 之 一 


BU 


RESI ШИЙ pA 一 0 M i= + l, k, > P = 
(pi. Ipo. X4 

qi = АА ро í = L, -*-, r, 
Jl giq; 一 1 或 0, 视 i = 或 否 而 定 .补充 mm 一 7 个 向 量 quus 
du) 使 sisi qu 构成 R” 中 之 一 法 正 交 基 , 闪 令 0 = (qi: 
qu). WA 


k r r 
4 = РРА = У) pip, A = D ра = >) ыр, 
t 1 1 


AO 
- ^40. - P(^ 0) 9. 
BIRRE. 
引 理 44 假定 
1? D = &ав(а4,+-+›, 2,), d; >> 0, Pl,e,p, 1 — D> 


2° G = dig (gs о, ge). 

3? QS p REZE. 

4° (G?) < t(D). 

5? QU — G>0' < (1 — р). 
则 4°, 5° 都 成 立 等 号 . 

WE. 以 g; 记 ОНЖ ғ 列 ,而 

e; = (И GYq4))^, ¿= 1, +, p. 

则 由 5° АП s < (1 dy, i=], p. ШШК I— D > 0, 
得 í, =< 1 — d;, ¿=1,+--, p, H 


P P P P 
21⁄4< үа ре Tet De 
1 1 1 1 
P 
—p—25 nculo(1 — GYQ'] 
P 
=p—2 D> <, + u(I с) 
1 
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Р Ё 
=гр—2уу)с;+ 21 G в) 
L 1 


Р P p 
= ек2 101—6) 2 Уе. (410) 
ЕН Schwarz 不 等 式 
(4 — С)? < САК — G4) = “1. 
从 而 е;,2>4(1-- G)q. i=1, p, B 


De У ga – 6) = ulo — 6)0 
=ҥ(ї—су)— >; G — gp. (4.11) 


Р Ё 
这 与 (4.10) 结 合 , 得 DS 41 =< > g, BI (DD) < (С°), Bi 4° 


即 得 t(D") = (G>). 
ЭШЕ 5° 也 成 立 等 号 。 若 不 然 , 则 在 不 等 式 
1—4;2e5i-—1,--5,p 
中 ， 至 少 有 一 个 成 立 不 等 号 。 这 时 (4.10) 将 成 立 不 等 号 ， 这 与 


Р Р 
(4.11) 结 合 , 将 得 出 >] 4 < > ,时 ,与 已 证 得 的 4° 矛盾 . 因而 5° 


必 成 立 等 号 。 引 理 证 毕 . | 
З 45 设 工 和 5 痢 是 wxX n BE, 则 LL'< LS' (ik— 
式 包含 要 求 LS” 为 对 称 方 阵 》 的 充 要 条 件 是 : FEDE M > 
0, M 的 特征 根 全 在 区 间 [0, 11 A, E L = SM , m (1) = 
1k( M ). | 
证 ， 充 分 性 显然 , 往 证 必要 性， 对 工作 特征 分 解 L = PG0', 
此 处 


而 A > 0 2) z EXIGERE, Р, О 分 别 为 严 阶 和 = БЗ. 因为 
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LL'-—PGG'P'« LS' = РЄО'$'РР' 5j 


GG' = GT, (4.12) 
此 处 
bn еу s Ta Te 
| Т' = ОР = ( Ln) 
AT, AT, 
GT -( 5 » ) 


因为 LS 对 称 , 知 GT 对 称 . HK ATu = 0, 因 而 Tuc О. W 
T, О I AT, О 
T = ( Ta ү СТ = ( j 


Ta o о 
由 此 及 (4.12), 得 

0 < A x ЛТ. | (4.13) 
Af 7.1 960, Ж A= (TRA = ATLA, AI 4 > 0,20 
由 (4.13) 知 TLA 22 Л. 故 АКТ) < AU. m CTaD'A < 1, 
因而 4=< I. KARERE, 115. X | 


c-(42)-( T» 2 (s e en 
ns BED о о о ті оо 


E8155) (оо) 


І = РСО = SQ Co p. (4.14) 


Н А Ed 
0049) рза 


WM 的 竺 征 根 全 在 [0, Ul, L = SM , 且 由 (4.14) 有 
КО) = СС) = rk(GT') = rk( A Tu) 
= rk( Á) = :k( M >, 


而 


AE, 
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引 理 4.6 若 4 不 是 对 称 方 阵 ， 则 必 存 在 正 交 阵 P, fis 
u(PA) > u( 4), (4.15) 


证 ， 先 设 4 为 二 阶 : 4-( 2): Ж с> 2, E 
正 交 阵 ， | 
1 一 8 g 
р, = ( g m" 


此 处 > 0 充分 小 ，g 一 V26 一 € 。 这 时 
t'(P,4) — tr(4) = —є(а + 5) + g(e— d) 

К e— 4> 0, g2-0, 取 旨 >0 充 分 小 有 tp4) > tr(4) 
GE 4 с, Ш 一 一 V2e 一 已)， 

一 般 情况 用 归纳 法 . 设 本 引 理 结论 对 4 为 4 一 1 阶 方 阵 时 成 
М. 现 设 4 为 = 阶 方 阵 ， 因 为 4 非 对 称 ， 改 必 存 在 一 个 * 一 工 阶 
的 非 对 称 主子 阵 ， 不 失 普 遍 性 可 设 它 就 在 4 的 左上 角 , 艺 

Аа bN: 
a -( d' c 

因为 As 非 对 称 ， 依 归纳 假设 ， 存 在 = 一 1 阶 正 交 阵 PBQ2a. È 
trfP dua) >> и(А„ 4). UR 


P, A О 
"-( i) 
O 1 


Hj p 2 z RERE, Н. 
u(PA) = tr (Pura. a) + (> tr( An) + e = tr( 4), 
这 完成 了 归纳 证 明 ， 


现在 回 到 线性 模型 《4.1)。 dd X = (д6 а), е = (а, 
ey 6) ;可 将 (4.1) 写 为 
Y = X8 + e, (4.16) 
假定 
Ee — 0, (4.17) 
COV(e) = eV, (4.18) 


ШФУ> 0 БАЯ, 0220 未 知 ， 为 简化 文字 ;以 后 称 由 (4.16) 一 
' 1885 


ы 
2 


анч Гу €. 


(4.18) ИНЕ Н, 

i 826 b „5 1—0 х Р, (E sg 可 估 ，Sp 的 形 如 AY 
的 估计 (4 为 《Xx пй) 组 成 线性 估计 类 色 。 以 下 总 采用 损失 
函数 

L(S8,4Y) = [58 一 47 全 (4.19) 

AUR AY 相对 于 估计 类 Se 在 损失 函数 (4.19) 之 下 为 58 的 可 容许 
估计 , 则 记 为 AY © sg. 如 引 理 42 所 指出 的 , 更 一 般 的 二 次 型 
损失 函数 (50 — ЛҮ) В(5# 一 4Y) (其 中 B > 0) 可 归结 为 
(4.19) 的 情况 . 

(Z) p=n BE X— L 的 情况 下面 我 们 要 致力 于 寻求 
AY É sg. ШЖ. ЖЕЕ РАННЯ: p= n, X = L, 
V 一 1。。 这 时 8 本身 就 是 可 估 的 . 

定理 41 在 模型 吾 之 下 , EXE X= 1, V= 1 J 
AY © pg 的 充 要 条 件 为 :4 为 对 称 方 阵 ,其 特征 根 全 在 [0, 1] 内 . 

dE. Wb AY g. 作 了 一 4 的 特征 分 解 


I— 4А = PG G (® 2) 
О, o oz 


P, ORE a (ТЕЗЕ їп G, = diag (gis ** 6) > 0. 
PL Ric BUE , А] 
R(8,0, AY) T ЕДАҮ — gl 
一 Es{tr[ACY — 8) + CA — D8M ACY — 8) + CA — II} 
= ctr( A447) + #'(1— A) (I — 4A»8 
= e'u[(1 — PGQ)'(I — PGO)! + P'OR. 
Шу ЕЮШШ Ж.И tr(48B) = (BA), A 


RE, o, AY) п) Б @й— 24е 10 | 


еа T 
此 处 1; 为 PO 的 G, i) 元 ;而 Chn ``: Ф.) = 08. 由 此 式 看 
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ш: 
I. A; 442029 BEE, НТР, ОЕ, # |] mI. 
车 4; 过 1, 则 可 取 А=1— Q'GO, H (4.20) 知 这 时 将 有 RA, 


P, AY) > R, 2, AY)， 对 一 切 8 及 2 0, 这 与 AY Z LEG 
JE. Bb А1, i 一 1,，…, r+。 因而 了 的 前 + 列 必 须 与 8 的 前 
"11—800. Рю: яча Со 的 第 i 个 行 向 最 》). HP 
的 后 (4 一 +) 列 可 任 取 而 不 影响 4， 改 可 到 之 使 与 2 的 后 (Ce — r) 
行 (的 转 置 ) 一 样 , PE P = OQ. 这 了 时 有 4 一 1 一 90'G0, 而 4 为 
对 称 阵 。 

2. БМВ u=- = 1, = 1, 由 (4.20) 有 


R(8, >, AY) = 0 |» —r 2G — iy + og. 


| (4.21) 
由 此 可 知 ,g,， xi gr 都 不 能 超过 1( 注 意 已 有 g; > 0, í = ly" "°. 
r). ЖЖЖ. 则 可 以 把 G 中 大 于 1 的 那 种 z, 38265 14830 G, 而 
令 Я=1— 0'©0, Wig (4.20 E И AY 的 风险 处 处 小 于 AY 的 


风险 . 这 与 лу 之 8 矛盾， 因此 有 0р1, imd, сә”, 
H 4-—1-—909'6G9 = 0 (1 —– С)0 知 4 的 全 部 特征 根 为 1 一 
533.1 вө 773501, 全 部 在 [0,1] 内 . 这 样 证 明了 必要 性 ， 
现 设 4 满足 定理 中 之 条 件 , 将 4 表 为 À = Q'AQ, A= 
diag(a, ar)， 则 有 0< 委 ca 委 1,， 1,507, п. ФОЕ 
ABE. id 0 = 08, ЕН 
R(B, ad, AY) = Pul A) + 8'(I — AY. (4.22) 
yk M Y 为 任 一 满足 条 件 
R(0,2,M Y) < R(S, o, AY), — 88 8 ё 2> 0 (423) 
的 线性 估计 .出 已 证 的 必要 性 部 分 ， 不 妨 设 邓 对 称 且 特征 根 全 在 
[0,116, М 3200 М = P'DP, P EX mD SE TREE 0 < 
D«l, 记 ОР = В, В JEZE, Н. 
Е(8,0°, MY) =ru D) + @ƏB(I — DYB'89, (4.24) 
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由 (4.22) 一 (4.24), 置 8 — 0,18 


tr( D?) x и(А?), (425) 
又 在 (4.22) 一 《4.24) 中 令 o? L0, WA 
B(1 — DyB' < (1 — АЎ. (4.26) 


H1 (4.25), (4.26), R15 H8 4.4, 知 (4.25) 和 (4.26) 都 成 立 等 号 ,因而 
有 
R(8, o, MY) == Е(#, ce, AY), HABEk а? 2 0. 


这 说 明 MY 并 不 优 于 AY, B AY < 8. 这 证 明了 充分 性 ， 因 而 
证 明了 本 定理 . 

V = 1, 的 情况 易 由 本 定理 得 出 ， 事 实 上 :有 

X42 在 模型 瑟 之 下 , 又 假定 X= le WJ AY 和 p ORE 
RHAN | 
1° AV 对 称 ( 这 与 VOA 对 称 是 等 价 的 )， 

29 4 的 所 有 特征 根 都 在 [10,1] 内. 

iE. Ж Z= VY, Д] COV(Z) = 021,, Wii sj 
4.1 讨论 的 情况 , 记 $8 一 V8, 则 EZ = ф, E. 

AY вә лу Vy SV HAVNZ бу, (427) 
最 后 一 等 价 关 系 是 很 据 系 41. 但 由 定理 4.1, 《4.27) 中 第 三 个 断 
言 成 立 的 充 要 条 件 为 : 

1' ү дү! 对 称 ， 

2' үздү 的 特征 根 全 在 [0, 1] 内 . 
显然 , 1 等 价 于 1° 而 2 等 价 于 2°, 于 是 证 明了 所 要 的 结果 . 

下 一定 理 券 虑 估计 有 的 一 个 线性 函数 的 情况 . 

X342 在 模型 政之 下 , 若 又 有 X= ln W qY pp 的 
充 要 条 件 为 Vq < руд. ХА p, 4 为 任意 两 个 42 аа. — 

Wu. AJ 

Ela Y — РВ) = о Va + 1804 pr. (4.28) 

Ж b= p+ (4 — р), 0 < < 1. yu | 
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E ,(b'Y — РЕ) 
= PEC сЎРУр + egVa + 2001 — e)pV4 
+ ellela — pr. 
由 于 ту “ pg， 由 上 式 可 知 | 
q'Vq < (1 — eYp'Vp + сд Уд + 2e(1— с)р Yge 
在 此 式 中 令 c 0, 即 得 9'Vg < mg。 这 证 明了 必要 性 部 分 . 
为 证 充分 性 ， 仍 用 变换 Z — УСУ 4k2| V = I, 的 情况 ， 
有 EZ —V-^p A p, COV(Z) = Pln X. qY © РВ <> 


4104 Ё р риф, 出 定理 条 件 有 
(VENG VAY < (a VC) vy, 

于 是 由 引 理 4.5, 知 存在 方 阵 MO, M 的 特征 根 全 在 [0, 11 内 ， 
& gV” =румМ, RERS 有 Mz s. icd 41, 8 
куму © руб, qz S ууф, B av РВ. 这 证 
明了 充分 性 部 分 . 

注 4.1 定理 的 必要 性 部 分 当 了 之 0 时 也 对 。 充 分 性 出 不然 。 
建议 读者 自 举 反例 . 

系 43 在 定理 4.2 的 条 件 下 ,对 任何 = 维 常 向 量 p， 有 РҮ 
L 
~ pf. 

下 一 定理 车 虑 估计 8 的 若干 个 线性 函数 的 情况 . 
定理 4.3 ”在 模型 及 之 下 , 若 再 假定 X =l., WAHE kX 


7 常数 答 阵 4 与 5， AY & sp 的 充 要 条 件 为 AVA SAVS., 
Ш. 208 V 一 L, 的 特例 . 设 AY 多 Sp。 依 系 41， 对 任 


何 天 维 常 向 量 六 有 4Y ров. 青 由 定理 4.2, 知 PAM p < 
p'45'p， 故 如 能 证 得 AS 的 对 称 性， 就 证 明了 AA DAS. 用 反 
证 法 . 设 AS 不 对 称 ， 则 CS — AS 也 不 对 称 . 依 引 理 4.6, 存 
在 正 交 阵 P, t 

t[P(S — 4)5'] > tr[ GS — 4)5']. 
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ШОМ =S—P(S— A), RA 
E,|M Y — Sei? — о%‹(М M’) + ї#'(5 — M)IP 
= g(u(ss') + 05 — AX S — AY 
— [PCS — 4251) + NCS — ADI 
< g^ u(SS') + u(S — AX S — AY 
— 2u[CS — 4251) + li& CS — OF 
= Ç AA") + IEC — A 
= El AY 一 SP。 
这 与 AY & se 矛盾 ,因而 证 明了 4S 对 称 . 

反 过 来 ; 设 44 < AS. 依 引 理 4.5, 存 在 方 阵 M 2 0,M 的 
特征 根 全 在 10, 1] 内 , 致 4 一 SM。 据 定理 41, 有 МҮ 6. 8 
HA 4l, ему зв, BI AY © se. KERT V = 1, 的 
情况 . 

对 一 般 的 全， 仍 如 前 ， 用 变换 Z — V—^Y 4654 V — L, BS 
情况 ， 证 明 组 节 与 系 4.2 类 似 , 故 不 重复 .定理 4.3 证 毕 、 

由 此 易 见 ,在 模型 吉之 下 , 若 又 有 X 一 7, 则 对 任何 有 >= 列 的 
常数 阵 4, 有 AY Z AB. 

设 在 模型 万 之 下 有 XX 一 1,。 % AY © 8， 则 由 系 42 知 AV 
XH. XH, 知 对 任何 = ORTU Р AYE ре. 这 两 
个 条 件 也 是 AY © 8 的 充分 条 件 : 


定理 4.4 江华 模型 再 之 下 有 x= L. BW) ay ^ 8 的 充 要 
条 件 为 : 
I° AV X, 


29 ралу © рв, SHEI n ERAR p 
证 ， 必 要 狂 上 面 已 讲 明 ， 为 证 充分 性 ,利用 定理 4.2, 由 p'4Y 


多 pg 推出 pAVA'pe«pAVp. ЗХР ШН AV 对 称 ， 
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RI AVE KAV, EMER 43,08 AY “ g. 
(=) 一 般 X WPA ТЕСТ НО H. ld 
T= XVOX, ё = T -X'V :Y, (429) 
如 在 第 一 章 中 提 到 的 , 若 8 可 估 , 则 上 就 是 8 的 BLUE 一 一 最 优 无 
偏 线 性 合计 ， 这 时 外 有 唯一 性 . 若 8 的 某 些 分 量 ) 不 可 估 ， 则 我 
们 仍 用 (4.29) 定 义 B, 这 时 已 没有 唯一 性 , 促 对 以 下 出 现 的 运算 不 
存在 这 个 问题 ,如 为 Xf 与 了 "的 取 法 无 关 . 
先 证 明 下 一 引 理 : 
引 理 4.7 在 模型 及 之 下 , £ L, S 为 常数 阵 而 且 LY 是 56 
的 一 线性 估计 (这 只 是 说 , L, S 有 相同 的 行 数 , 工 有 关 列 而 3 有 了 
AD-E R = > 0, 有 | 
E,|LY — 58] > Epl LXë -~ 58|. (4.30) 
等 号 成 立 的 充 要 条 件 为 下 列 两 条 件 之 一 : 
1° L = LXT X'V^, 
2° HA (VL')CAE (X). 
{因此 ,1° 53 2? 也 等 价 . 这 一 点 很 容易 直接 验证 ,》 
证 ， 有 
EsllLY — 58| = w(ECLY — SP(LY — $8)'} 
= tÍ E(LY 一 LXÊ + LXB — SB)(LY 
— LX + LXÊ — sg) 
—ulE(LY — LX8)(LY — LX8) Y 
+ tr{ EUEXÉ — SE)CLXÉ — S8) 
-uiL(i— XT X VSVU 
— XTX VOYE} 
+ {EL LXE — SAX — 58) } 
> Esl LX — seil. (431) 
在 推导 (4.31) 时 ， 第 三 个 等 式 和 用 了 事实 Е(ХЁ) = ХВ. REN 
29 Xp жер, 而 X P 为 其 无 偏 估计， 以 上 证 明了 (4.30)， 且 
由 (4.31) 知 ,《4.30) 中 的 等 号 成 立 的 充 要 条 件 为 
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{L — XT RV VG — XT^X'V2OyL)-0. (432) 
id A= L(I— XTX VDV”, WASDE u(444) 一 0， 因 
而 显然 有 4 一 О. С.з) 
LO — XT^X'V y^ = 0, 
而 后 者 显然 等 价 于 1?. MA FW 1° 52 {. 由 1° 得 
VE = XT 因而 (VE)CAAA《(X)。 若 后 者 成 立 ; 则 存在 
D,& VE = Хр. ў 
LXT X'V^? = (LV)V'XT-X'VA 
—DXV?o2xT-XVy3 
= D'X'V = LVV =L, (4.33) 
因而 1? pir, SIE UE EE ((4.33) 第 三 个 等 式 的 证 明 利 用 了 
X'V^OXT-X'V^-—XVy., 
本 引 理 的 后 一 部 分 也 可 以 表 为 : (4.30) 中 等 号 成 立 的 充 要 条 
件 , 是 LY = 1х8. XRH: 一 切 形 如 LXÉ 的 佑 计 类 在 一 切线 
性 估计 的 类 红 中 ,构成 一 个 完全 类 ， 


定理 4.5 йн Z К, 若 58 可 估 , 则 AY © sp 的 充 要 条 
件 是 : 

1° 4= АХТ-ХУ (了 由 (4.29) 确 定 )， 

2° AXT-X'A' < AXT-S’. 

注 4.2 XTX 与 T^ 的 选择 无 关 ， EXE, XTX = 
VVRW'W)-W'V^, 其 中 W = рлеу, 由 于 www: 
为 向 (WP) 的 投影 阵 ,与 (WW) 的 取 法 无 关 ， 即 得 出 所 述 
SX. KA SB 可 估 , 有 5 = ХВ, Rik, XTS = (XT~X')B， 
же тт 的 选择 无 关 ， 

又 从 上 述 讨论 ， 知 XTX HARE, Bks AXT XA 也 
是 对 称 阵 ， 条 件 2° 包 含 了 要 求 AXT S 为 对 称 阵 . 

定理 的 证 明 . 作 正 交 阵 Р 一 {PiP,), 使 «Ё (P,) 一 
A CV OX), ld п = РУХ, WW 0 ваа R? 时 ,1 RO R, 
此 处 r 一 水 (X)， 为 妇 确 这 一 点 ,注意 由 4 (V 7^X) = (B), 
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知 存在 矩阵 C, 致 P = VXC TER 
r 2®тК(РУ РХ) = ЕСС ИТХ) > rkCC'X'V^?XC) 
= rk(V 12XC) = rk(P,) = r, 
这 证 明了 所 述 事实 。 此 外 ,我 们 还 有 
УХ = PP VIX — PPV X. (4.34) 


依 引 理 47, 条 件 19 对 于 AY © 5а 是 必要 的 。 因此 为 证 本 
定理 ,只 需 证 明 在 1° 成 立 的 前 提 下 , 2° 是 AY esp 的 充 要 条 
dk. 2 Z-—PSOAY, WJ 

EZ = PV ?X8 = т, COV(Z) = 01,. 
x 
AY 一 AXT-X'V^Y = AXT X'y PP V ay 
= AXT-X'VOPPRZ., 
ХЕ Sg "Ift. РЕНЕ DD, 致 5 == DX, 
58 一 DXB = DV'^y-xg 
"æ DVPP, V” X 8 = DV” Pig, 
因此 
AY & sg | 
< AXT X'V PZ рур 
<= AXT-X'VPPPIÀWOPXTIX'ÁA! 
< AXT XVIP PVD, (4.35) 
(4.35) 中 最 后 一 等 价 关系 是 根据 定理 4.3， 但 由 (4.34)， 
AXT~X'V HPPV XT-X’A’ 
= АХТОХ'ҮЗХТ X'A' = AXT^X' A5, 
AXT-X'V -PPVID' = AXT XV yip! 
= AXTOX'D'— AXT-S’, 
此 两 式 与 (4.35) 结 合 , 证 明了 在 条 件 1° 之 下 , 2° 5 AY © sp 等 
fr. mmn. 
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RAA нот, AY © GXP 的 充 要 条 性 为 1° 及 2: 
AVA < AVG', 

证 。 此 梢 当 于 定理 中 5 = GX 的 情况 。 在 条 和 件 1? Rapt 
PE | 

AVA = AXT XV "VV RT X'A' = AXT X'A', 

AVG 一 AXT-X'V3VG' = AXT-X'G' = AXT-(GXY'. 
ЕЗ БТЁКЇЕ. ， 

X45 1н F, Æ rk(X) = p ОХЕ а), ДІС 
按 (4.29) 定 义 。 又 注意 此 处 了 存在; 故 T = T) 

ІЁ spe LT2L'« Т5, 

证 . M LÁ 一 LT X'VCOY, WB T O E SB 45 A 4 = 
LT-AX'V 的 情况 ,有 

AXT?X'V3 = LT2X'VAXTAX'V^ — LT?TT?X' y^ 

—LT2OX'V^ = 4, 

知 定理 4.5 АЈ Е. 同样 ， 直 接 代 人 人 知 2° 归结 为 LTL S 
гт. | 

一 个 人 得 注 意 的 特例 是 (在 模型 十 下 , 且 (X) ~ p) 

8. a. (4.36) 

这 可 由 在 系 4.5 中 取 工 一 3 一 工 得 到 这 个 结果 表明 ， 在 “一 
致 优 于 ”的 意义 下 , 要 在 线性 估计 类 % 中 寻求 一 个 比 上 有 改善 的 
估计 是 不 可 能 的 ， 在 下 节 中 我 们 将 看 到 。 这 在 8 的 非 线 性 估计 类 
中 是 可 能 的 ， 

我 们 以 上 得 到 结论 (4.36) 是 基于 定理 4.5, AtA TRE 
一 个 很 深刻 的 结果 ， 实 则 不 然 、(4.35) 很 易 直 接 证 明 : Wk LY 为 
任 一 线性 估计 ， 若 LY 不 是 8 的 无 偏 估计 《这 等 价 于 LX = ID, 
THER 

RE, 2, LY) = К.х — DB + «(COVCLY)) 
而 
R(B, а, 8) = w(iCOV(E)). 
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8, E (Lx — 1) 关 0 我 们 看 出 , BDE me 9 o h, 
将 有 RGB, o, LY) > RGB, 0, É), Vin LY 不 能 一 致 优 于 ó. 
Ж“ LY XER- WA 各 为 8 的 BLUE， 有 tr{COV (LY)} > 
tr{fCcOV( 信 }， 因 此 在 这 种 情况 下 ;有 一致 地 优 于 工 Y (或 具 同 一 风 
险 函数 )。 这 证 明了 所 要 结果 ， 


$4.2 右 归 系数 的 线性 估计 的 可 
容许 性 II 在 一 般 估 计 类 中 ) 


在 本 节 中 ,我 们 仍 取 平 方 损失 冰 数 LCa, Ө) = le — ol. 在 
这 个 损失 函数 下 来 讨论 线性 估计 在 全 体 估 计 类 中 的 可 容许 性 。 这 
是 一 个 比 在 线性 估计 类 中 的 可 容许 性 更 强 的 性 质 . 因此 需要 的 条 
件 自然 就 多 些 . 更 主要 的 是 : 在 平方 损失 下 线性 估计 的 风险 可 以 
算出 显 式 且 只 依赖 于 随机 误差 分 布 的 前 两 阶 矩 因此， 不 仅 在 讨 
论 容许 狂 时 可 充分 利用 估计 的 风险 的 表达 式 ， 而 且 整 个 讨论 只 水 
及 到 前 两 阶 矩 而 与 (随机 误差 的 ) 分 布 无 关 . 如 果 在 一 般 估计 类 中 
讨论 ,这 两 个 有 利 条 和 件 都 告 消失 ,因而 情况 大 为 复杂 ， 

值 此 以 故 : 总 的 可 以 说 ,关于 本 节 讨 论 的 这 个 题目 ， 且 前 我 们 
所 知 实在 还 频 有 限 ， 具 体 地 说 ， 在 随机 误差 服从 正 态 分 布 时 ， 有 
了 不 少 结 朱 (在 一 维 的 情况 下 还 有 指数 型 分 布 族 ). 对 一 维 的 情况 ， 
Girahick，Savage， 玉 arlin， 成 平等 人 在 五 一 六 十 年 代 研 究 了 指数 型 
分 布 族 参数 的 线性 估计 的 容许 性 问题 ， 并 得 到 了 较 完满 的 结果 . 
当 维 数 超 过 1 时 ,在 正 态 分 布下 ,基本 结果 是 Stein 和 James 等 在 
五 十 年 代 一 六 十 年 代 初 期 得 到 的 .James-Stein 的 工作 [8] 和 Cohen 
的 工作 [9] 讨 论 了 一 般 回 归 模 型 (在 此 以 前 ， 问 题 多 限于 一 般 线 性 
模型 之 一 特例 一 一 估计 均值 ).。 近年 来 ,关于 正 态 族 或 一 般 的 位 置 
参数 分 布 族 中 的 位 置 参 数 估计 的 可 容许 性 ,还 有 一 些 较 好 的 结果 ， 
但 这 与 本 节 主 题 的 限 离 已 媒 远 了 些 . 

本 节 更 分 三 段 . 第 一 段 讨论 一 、 二 维 正 态 分 布 均 值 佑 计 的 可 
容许 性 ， 对 一 维 情况 ,这 是 一 维 指数 型 分 布 族 的 一 般 结果 的 特例 ， 
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但 对 下 态 分 布 证 明 简 单 得 多 ， 二 维 情况 是 Stein 证 明 的 ， 由 于 让 
BEEK ,我们 把 证 明 赂 去 第 二 眉 讨 论 高 纵 ( 维 数 衬 3) 正 态 均值 
估计 、 介 绍 Stein 和 成 平 的 结果 . 第 三 段 讨 论 一 般 线性 模型 当 误 
2E BE IE SS Dy HR ,线性 估计 在 全 体 估 讨 业 中 的 容许 性 问题 ;主要 
是 介绍 了 Cohen 的 结果 . 
(—) 一 ,二 维 正 态 分 布 的 情况 ”模型 是 
Y; =p + e, i=l, tsn, 0 (4.37) 
其 中 e, сс, Eg 独立 同 分 布 , 且 е^ N(0, 1) (一 维 ), 或 е^ 
NCO, 1,) (24). 这 显然 是 一 般 模 型 (4.1) 的 特例 . 如 前 面 已 指 
НАЧ, АВА е — gu. X: КУ) 为 (8) 的 (在 一 
切 估 计 类 中 的 ) 可 容许 估计 ”一 语 , 仍 简 记 为 KY) ~ gCD. 
根据 充分 性 的 考虑 ,可 以 取 充 分 统计 量 Y 去 讨论 . AA F m 
为 正 态 ， 故 这 意味 着 不 失 普 遍 性 可 在 (4.37) 中 取 л = 1， 因 而 我 
们 将 模型 简化 为 
Y=f е, e ~ МО, 1)» 1 一 1, 或 2. 《4.38 ) 
定理 4.6 在 模型 (4.38 ) 之 下 ，Y ~ ñ. 
WE. 453518 ; = 1 的 情况 。 此 时 了 关于 直线 上 的 Lebesgue W 
БЕ CL, WEERA I 
Cr) 7^ expl —2 (у — 8) 
= (2x) *екр{ 2f! + Ву — 27у}. 


c(8) = expl —2 8). 
uCB) ж (2х) b exp( —27y!dy, {E BE Bs 


此 处 4, 为 直线 上 的 Bored PR. Р, Y 关 于 测度 的 密度 函数 
为 
с(В)е?>. 
在 定理 L8 中 : 取 22 0. ВЕ 1.8 中 移 所 有 条 件 都 满足 ， 因 
ib Y — 0. 
i 一 2 上 时， 证 明 比 较 复 杂 ， 这 里 赂 去 。 有 兴趣 的 读者 可 查阅 
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18] 或 [12]. 

(=) ЖИТ Ж Y ~ NOS 1. 在 (一 ) 中 给 出 了 当 z < 
2 时 ,Y 为 B 的 可 容许 估计 .从 直观 上 看 ,似乎 很 有 理由 预期 , 这 
个 结论 当 = > 3 时 仍 成 立 . 出 人 意料 之 外 的 是 ，Stein 于 1956 年 
在 [10] 中 否定 了 这 个 狂想。 беш 原来 的 证 明 较 复杂 .。 后 经 过 
Hudson [13] 的 简化 , 即 以 下 定理 4.7 中 采用 的 证 明 . 这 个 定理 在 
容许 性 理论 中 起 了 重要 的 ,甚至 可 以 说 是 历史 性 的 作用 ,成 为 以 后 
许多 研究 工作 的 起 点 ， . 

定理 47 设 了 ~ 人 Np, 1), ще 3 WF, Y E ЕВУ 
容许 佑 计 ( 如 上 ,总 是 以 le 8l 为 损失 函数 》. 
证 .我 们 往 证 : Y) = (0 — (а DYDY Do v. Ж 
实 上 ,有 | | 

Eala CY) — gll = EsllY — 6 + E,L(n — 27 YT 
— Xr — 2)E,[(Y — 8) Y/lYIP1. (4.39) 


为 
E, — PY/ |Y] 
ча IM [y (y; — вг) 11У 767170722, , 
注意 到 由 分 部 积分 法 有 
| E: yi — BON e 9 P7ay;, 
zs r. —y y| 22 tica pa 
É f Ж (s| 一 25D yl t c 7? dys 


得 到 
E,CY — УУУ?) 


к= (2r) "P f. > (quei = 22) 51-10-12 


= e 0 енед 
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= Е Са — 2)/]|У[]. 
由 此 式 及 (4.39), 得 知 对 一 切 了 8 有 
EsllsCY) — el? 
= EslY — £l? — (s — 2Y EJ YU? 
< Е.Ү — gll. 

从 而 证 明了 所 要 的 结果 ， 

Аж]. BA 7> зу ~ В 不 成 立 , 但 是 否 能 找到 
s ЭЗ 4, 使 AY ~ 82? Cohen 在 {91 中 肯定 地 回答 了 这 个 间 
题 ， 他 的 回答 粗略 地 可 理解 为 要 AY ~ 8。，4 必 须 是 一 压缩 性 
的 变换 . 
定理 48 Ë Y — NOB. 1,), W AY — 的 充 要 条 件 是 : 
1? 4 对 称 ， 
2° А 的 特征 根 全 在 区 间 [0, 1] 内 , 且 至 多 只 有 两 个 特征 根 为 
1. 

注 4.3 注意 在 本 定理 中 并 没有 要 求 之 3。 就 是 说 ， 它 对 
n = 1,2 也 成 立 ， 从 本 定理 可 知 , Y 的 线性 函数 AY 如 为 8 的 可 
容许 估计 ， 则 4Y 的 构造 如 下 : 能 用 正 交 变换 了 把 了 Y 变 为 PY = 
Z = (Zis tts Zn)， 然 后 对 Z 的 每 个 分 量 作 压缩 , 即 令 W 一 
(QUT .... с.2.)'» 0=< ¿e =< 1, гн l,a Hz n — 
2428 ЖЕЗДЕН. И.Е ¿< 1 的 i。 Epi n — 2 +. 
REH PERR P ØVER, 得 P OW 一 4Y。 这 样 得 出 
的 ,也 只 有 这 样 得 出 的 4Y, TE 8 的 线性 可 容 往 估计 。 当 = 二 1 
财 ,本 定理 得 出 一 个 周知 的 事实 ; ¿Y ~ 8 的 充 要 条 件 为 Se < 
1. 

为 证 定理 4.8, 先 证 明 下 面 的 简单 引 理 。 

9848 # Y ~ N(8. PIA 为 二 阶 常数 方 阵 , 则 对 于 任 
4а] n EZR P, AY ~ B—P'APY ~ В. 

证 。 由 假定 知 РҮ ~ NOB. 01,). Hk 

AY ~ @<=> АРУ ~ PB, 
XA 
* 201 > 


EsllP'APY — В|? = EsllP'(APY — РЕ)? 
= E,||4PY — Pel 
知 PY ~ PBe——PAÁPY ~ B. 于 是 证 明了 本 引 理 . 


现 往 证 定理 4.8 ,因为 AY ~ B > AY “ g, 由 定理 4.1 知 ,和 欲 
AY ~ В, А 必须 对 称 且 特征 根 全 在 [9,11 内， 因此 问题 归结 为 : 
在 4 具有 此 性 质 的 前 提 下 ,去 证 明 AY ~ 8 的 充 要 条 件 是 ，4 的 
特征 根 至 多 只 有 了 两 个 为 1. ЕЗЕР, 

` P'AP = À = diag(1,, • +", 2,9. 
1 => Ад Z Ь„2>®--. = 1, = 0. 
因而 问题 归结 为 证 明 : AY ~ 8 <> b, < 1. 

先 证 充分 性 . WR 1,220. A, = 0. M eI B.E S - 
(8. c 5 的 先 验 分 布 BH F: Rocco Bs 相互 独立 ， 0; ~ 
NO, г), b; — (1 АГА ¿= do cs po Hú B; 退化 于 0 当 
г >р+1. 这 时 P 的 后 验 分 布 为 ， #;= 0 3 ¿2 p +I, 而 
(8, c pp)” 的 后 验 密度 为 


P 
(Qz) PACA t - 25)" exp |- 2> (8, YYY г]. 


由 此 不 难 算出 在 此 先 验 分 布 所 之 下 的 Bayes 解 为 
Е(ВІҮ) = AY 

且 它 是 唯一 的 .因此 ,由 第 一 章 定理 L7, 知 AY ~ 8. 再 由 引 悍 
4.8 知 PAPY ~ 8,8 AY ~ 8. 

T—^WRET1-1 nel Xd ER. GNU 
à = ài 1, а <1 相似 。 因而 我 们 只 考虑 后 者 。 现 设 存 在 估 
计 АСУ), 3 М 

RCE, &(Y)) < RC, AY) 


一 2 + Su + KO — 21. (4.40) 


往 证 АСу) = Ay, a.s. Ln. 证 朋 了 这 一 点 也 就 证 用 了 AY ~ 0, 
因而 AY ~ 8. Ш Ва = (fis 825 Во = Вз‘ B.) П 8 
‚ 2024 ` 


分 块 为 P = (Boys Bo). A GG) = FO 【为 避免 与 导数 混 

Б.а AO) 的 转 置 记 为 #7(y)， 以 后 碰 到 这 种 情况 也 如 此 处 理 ) 

ТЕШ ЖЕШ ДЖ. AO 一 《如 CD 。 姑 CD》， 则 可 将 (4.40) 写 为 
E,|^a(Y) — &vll' + ЕАС) — Loll 


<2 十 Yu + 8(1-— yF]. | (4.41) 
3 


取 Во 的 先 验 分 布 如 下 : ico 6, 相互 独立 ,Pi ~ NC 5, 
bi = (1— LX. 一 3 s р 而 Bru 7775 В, ВЛЕЕ O. 
注意 到 在 此 先 验 分 布下 ， 房 的 均值 为 L/O-—A):23. 由 
ADART ETHER fo A 

E*|h (Y) — Bwll? + ЕСУ) — Boll? 


? 
x2» (4.42) 
3 


此 处 及 以 下 ,E* 表示 对 表达 式 中 的 Y 和 出 现 的 AG m3) 同时 求 
期 望 。 如 所 周知 ， 

E*|^a5(Y) — Bo ze E*JE al Y) — Bo, (4.43) 
而 


Е(Во |У) 一 ЛУ)» 
p 
E*|Ai Yo — Во? = 5 Ris (4.44) 
3 


此 处 Ag 一 diag(4;, ttt. 1,), Yt ii (Ys, dd У,). 出 (4.40) 
一 (4.44), 有 | 

E*l oY) — #61 < 2 = ЕУ — Boll. (4.45) 
їп | 

Ку» ё.» ё) 
л 12 2 
" сх" (1 — 22) |->) (y: — &yn 
-Xa-ayn|. 

则 易 见 它 是 包含 参数 fh: 之 一 密度 族 , 且 
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E*|o (Y) — B| 
TE p liw) E Вау 82)dy 。 


于 是 (4.45) 可 写 为 

Ehho) — fol? < EY Во. (4.46) 
E, 表 在 Y 的 密度 为 了 时 取 的 期 望 值 ， 由 此 及 定理 66,51 
I Баб) = ya a.s. La, (4.47) 


事实 上 , 车 此 不 成 立 ， 则 取 RO) = ZO) + Үс). НУ 


函数 的 严 凸 狂 及 f(y, i. B) > 0 对 一 切 y 将 有 
ЕККУ) — Bol? < Еу — [ә 一切 ao € К°. (4.48) 

但 对 密度 族 {iiy Bi» 82] m. (у) 一 Gio yi) 是 一 充分 统计 
量 , 而 损失 函数 是 凸 的 . 政 由 判决 理论 周知 的 结果 可 短 ,存在 统计 
Ж Yw) 9 

ЕСУ) 一 Во < ENIRO) — folls —5À ва € R. (4.49) 
由 (4.48),《4.49) 并 注意 当 E, 号 下 的 量 只 涉及 Yo) 时 ,Bj 与 Es 一 
致 ,得 

ЕСУ) — Во} < ЕУ — Bwl —9) 8€ К”, 

这 显然 与 定理 4.6 的 结论 矛盾 ,因而 证 明了 (4.47). 306 (4.47) 与 
《4.41) 结 合 , 得 


Eslha (Y) — Во < УЗГА У 01 一 232] 


= Epl Aom — Во. 
由 此 可 得 
бу) = Ашу, a.s, Lys (4.50) 
事实 上 ,车 此 式 不 对 :网 令 абу) = UG + Auyol/2. HE 
Eg|aCY) — Bol? < EslAoYo 一 po 由 ， 一 切 BE К”, 
由 此 将 得 
E*|a( Y) 一 Fall! < EJAY 一 ol. (4.51) 
但 E*la(Y) — Bal? ВОО СУ) 取 的 ) 最 小 值 就 在 E(R lY) 
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AcYo ХК]. dk (4.51) 不 可 能 成 立 ， 因 而 证 明了 《4.50)、 由 


(4.47) 和 (4.50) 得 
AD = Ay, as. La, 
这 证 明了 AY ~ 8. 如 前 所 述 , 这 证 明了 定理 的 充分 性 部 分 . 

现 证 条 件 的 必要 性 。 设 在 在 和 > 3 A. 一 1、 根据 定理 4.7， 
存在 eCY,, UPS Үһ), 致 

Eple (Ys <*> Y.) 一 В]? < ЕЗУ,» E Yoy xd ó|, 

8) gem", (4.52) 
此 处 8 m Ci» ы. Pa). 取 估 计 
6(Y) == CY +7. Үг), Акал Уза “у A... 
由 (4.52) 将 得 
Esla (Y) — Bl < Eel AY — Bl, 一切 pe К". 
于 是 AY, 因 而 4Y ,不 是 8 的 可 容许 估计 。 这 证 明了 条 件 的 必要 
性 ,因而 完成 了 定理 的 证 明 . 

另 一 方面 ,成平 {11] 对 Stein 的 著名 结果 定理 4.7 作 了 一 个 有 
趣 的 补充 ， 他 证 明了 : 若 不 指定 方 羔 之 值 , ШИЕ NGE, I) rh, 
Y 仍 为 的 可 容许 估计 : 

TERRAS Ш Y~ NC(8,01,)， PER fü а > 0 都 未 知 , 则 
Y ~ В. 

证 。 设 存在 8С), 

Ealla) — 8l? < EY — Bl! = nc (4.53) 

*j—9U) Be R^ 及 8 2-0, HIR SS = 257 4E3E Co 03) 处 成 立 ， 则 
必 有 Ly: 56275 у} > 0. dd 

St— {y= Gutts yY: iyl Ski == l,e n} 
则 必 存 在 «>> 0 和 k> б, 3t L,CA..) 2 0, Ж 

Аһ m {ENEO — у] 2 a} sa. 
以 FG) 记 集 An, 的 指示 函数 , 取 IO) 的 一 Lebesgue 点 ? Jo 一 
1) 所 谓 点 x = Qus etea x4) 是 了 人 的 Lebesgue 点 ?是 指 

m, Quy f ee Fon io Olan d = 0. 
— L, BRE ; fim ЕЕ: R ALERA, BIEOGSREUDE ff Lebesguc 
A., п=1 KERL 9 9. 291 时 证 明 与 #* = 1 的 情况 类 似 ， 
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Ооз tt» Yu) € Aat Їй ФО) = Оа) tuno, 则 对 任 给 
5,220, FE bh 0, 1824 i» = b, d]... 时 ， 有 
PO) =b. 1 

Esla) — YI 


>a Í. IO Py — у„)/о)4у 


> ab, | 1(y)o7*dy 


Ii- Yil Gh ps 
Loa | 
"рү Jly;-y;ol&B,os i1 5 8 
Hn 个 超 平面 将 超 正方 体 B = {у= (ytt to Ya): lyi 一 yol < 
bg, i10.) HIDHE B;, i — 1,27. IRI y 29 
I(y) 的 Lebesgue 点 :有 


1(y)dy. (4.54) 


1 
{i — Í I dy = ] p — 145,2" 
uin 630 du (у)4у ан 


此 式 与 (4.54) 结 合 , 给 | 
liminfE,]l8(Y) — Y lj ;> 2"а5,Ь1 > 0. (4.55) 
4-6 


另 一 方面 ,由 (4.53), 有 
Ej[o(Y) — Y|? < 2E,J8(Y) — В]! + 2E, — ph 
< tn — 0, Щщ c— 0. 
这 显然 与 (4.55) 了 矛盾 ;因而 证 明了 所 要 的 结果 . 

(=) 一 般 线性 模型 的 情况 ”现在 假定 Y ~ N (X8, V), X 
已 知 且 V > бш; 8 的 线性 可 估 函 数 的 线性 估计 ,在 全 全 估计 
类 中 的 容许 性 问题 .。 首先 ;下 述 结果 是 定理 4.8 的 简单 推论 

定理 4.10 1? E: Y ~ N(XAB,V), X29 BERDE, V > 
08. MJ AY ~ p 的 充 要 条 件 为 : XAV К, ХА 的 特征 根 
全 在 [0,1] 内 , 且 等 于 1 的 至 多 只 有 两 个 

2° Ж Y ~ N(X8, ду), X, V BERA., (8 2 > 0 R 
A]. Ж XAV 对称,X4 的 特征 根 在 [0,1] 中 且 等 于 1 的 至 多 只 有 
两 个 , 则 4Y ~ p. 
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ПЕ. 1° & Z= VY, W| Z ~ (V??X8, 1,). HEH 4.8 
及 系 4.1, 有 

AY ~ Ве» V IXAV EZ ~ V ''2X8 

<> V ^XAVV 对 称 , 特 征 根 在 10, 1] 内 , 且 等 于 1 
的 特征 根 至 多 只 有 两 个 . 
但 ух ду'* Ык <> y^.yo?2xA4yP^. VY рк < ХАУ 
HRN VCOCXAV'U 5 XA 有 完全 一 样 的 特征 根 ， 因 而 证 明了 
19, 
2° 若 存 在 估计 量 5(Y), 使 
R(B,c,8(Y)) < R(E; п, ДУ), 对 一 切 8€ К", >o 
且 不 等 号 在 某 个 (Bo, 02) 处 成 立 。 这 等 于 说 ,在 模型 NXB, oW) 
之 下 ,AY ~ 8 不 对 ,这 显然 与 1° 矛盾 ， 证 完 . 

应 当 注 意 的 是 在 上 述 定 理 的 2° н, 条件 只 是 充分 而 非 必 
BE. 定理 4.9 就 说 明了 这 一 点 。 还 有 下 面 的 结果 : Ж Y~N(Xp， 
PV) XA n АЕБ, V > 0 已 知 ,0 > RAR 8 的 LS (i 
WORN XY ,为 8 的 容许 估计 . 事实 上 , Z 会 VY~N(V Xp， 
Pi) 由 定理 4.9, ЭП Z ~ V'^X8. 再 由 系 4.1， 得 ХОУ ~ 
xiy y xg 一 8。 在 此 处 , ХА = XX? 一 了 ,其 特征 根 全 为 1 
且 个 数 可 多 于 2. 

下 面 转向 讨论 一 般 的 XX 的 情况 ， 先 证 明 以 下 的 引 理 : 

引 理 4.9 设 4 为 秩 不 小 于 3 的 和 矩阵, V “44' =< AS. H. 
(457 — АЛ”) > rk( A) 一 22 的 充 要 条 件 为 :“ 存 在 M 220, M 
的 特征 根 全 在 [0,1] 内 且 等 于 1 的 至 多 只 两 个 。 致 A= 5м, 
tkCA) = rk(M )”, 

WE. ја 本 (4) 一 +。 先 证 必要 性 ， 由 于 44 所 AS. R5] 
理 4.5, 知 存在 M 关 0，M 的 特征 根 全 在 [0,1] 内 ， 臻 4 一 SM， 
КОМ) 一 +。 找 正 交 阵 了 , 使 М = РАР', 此 处 4 一 diag(2 sns 
415390，0) ТП 1 2A 2 +++ mAOSTA AS—AA'=S(M— 
MOS = SPLA 一 ADP S, 因而 rk(A — A?) Z rkCAS' —44') 2: 
т— 25 А oct, AL 中 ,至 多 只 有 两 个 为 1. 这 证 明了 必要 
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t. 
为 证 充分 性 , 依 引 理 4.5, 直 接 得 出 AA' << AS'. REX P. 
使 M = PAP', 4 一 diag(i +» les 0,5,0), 122 А, 22 六 
2, > 0, H 2, < 1, їй A, = &ад(А»›+°°,1,)› A = Чїад(1›**°› 
2,). 将 SP 分 块 为 СС, : С, Cs) 其 中 CA 27], C, 8 r — 2 9) 
(Ж C, 这 部 分 可 能 并 没有 ,因为 SP 可 以 只 含 r 列 )。 则 
AS' — AA = S(M — M?)S' 
= (C: C)CA — АСС,:С) 
z Cal — AD) Ch 
因而 
rk(4S' — 447) > тк(С,(Л,— ADC) 
=&(С,). (4.56) 
但 44 — SM?S' = (Ci iC AC ECY ARI 
rk(C,: C) = rk (4 47) = rk( A) = т, 
因而 r—2 > гЕСС,) > rk(C,1:C,)—rk(C,) > r—2,BD rk(C;;= 
r+ —2. Bil Ю(456), Al rk(4S' — A4) > r — 2, 这 证 明了 条 
O PDEA. 引 理 证 毕 ， | 
定理 4.11 # Y ~ NXg: гу), V > 0 已 知 ， > 0 4 
1,58 п.ш (4) 一 上 MH 
1? 41 &2W,id T—X'V^X (TADA 
AY ~ <А = AXT-X'V?^, H AVA' < AXT^S', 
2° 41 大 3 时 ， 若 以 下 三 条 件 成 立 , 则 AY ~ Sp : 4 = 
AXT-X'V-1, АУА < AXT S, tk(AXT-5' — АУА") > 0— 
2, 
证 。 找 正 交 阵 P — (Р,:Р,), 使 МОР) 一 MCVC?X), WA 
rk(P,) = rk(X) = +, B. 
yx = PPV "X, (4.57) 
£ n =P VX, > 8 РЫ R° BF, 7 9 Rn Q 2 
PVY, Wj Z ~ NÓI). 
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先 证 1° 的 必要 性 部 分 . 着 AY ~ 58, 则 AY < se. REE 
理 4.5, 有 4 = AXT XV 2. LEA 4.4 的 证 明 中 得 知 ， 在 定理 
4.5 的 条 件 1° 成 立时 ,该 定理 的 条 件 2° 可 推出 44'<4XT-S， 
现 往 证 充分 性 部 分 ， 由 假定 及 (4.57) 式 ,有 

AY = AXT X'V?Y = AXT X'V PPV NY = LZ, 

L = AXT K'V "Pa (4.58) 
A sg 可 俩 ,存在 О, 5 = DX. ж 
58 = DVV Xg = DVP PIV Xe 
= DVP n = Ch, С = рү!'Р,. (4.59) 
注意 到 (参看 系 4.4 的 证 明 , 并 利用 (4.57) 式 ) | 
LL'--AXT^X'A':-— AVA, 1С'=АХТ5', 
有 rk(L) = rk(4) <2. 又 由 假定 ， S LL' < LcC', gps 
4.5 知 ， 存 在 M 兰 0。 对 的 特征 根 全 在 [0, 110, Œ L — CM, 
rk(M) = 001) <2. Hi, M 的 特征 根 中 , 至 多 只 有 两 个 为 1。 
依 定理 4.10 的 2°, 知 MZ ~ 9， 再 由 系 41,9 CMZ ~ Cn BI 
LZ ~ Cn, 依 (4.58) 和 (4.59), 这 就 是 AY ~ S8。 于 是 证 明了 定 
理 的 1°, . 

为 证 2° , 用 证 明 1° 的 充分 性 部 分 的 方法 并 沿用 其 记号 , 并 注 
意 在 2° 的 假定 下 ， 由 引 理 4.9 仍 存在 M 2 0, M 的 特征 根 全 在 
10.1] 内 , 且 至 多 只 有 两 个 特征 根 为 1。 TÆ, 依 证 明 1° 的 充分 性 
部 分 的 推理 , 即 证 得 所 要 结果 ， 定 理 证 毕 . 

3&4.6 j Y~ N(X8,0V), V > 0 0,51, >o RAL 
BIRA p< 2, 而 kX) = p. 则 8 的 BLUE, BD = 
TOX'V?Y, 228 ВЖЕ. 

IRASE 4.11 的 1° 推出 . 

但 是 ， 在 系 4.6 的 条 件 下 若 n> p> 3, M 2-8 不 再 成 
立 ， 将 此 与 以 前 ( 见 84.1 末尾 处 ) 得 出 的 8 和 < 对照 我 们 看 出 ， 
最 则 六 在 线性 估计 类 中 已 无 法 (在 一 致 优 于 的 意义 下 ) 改 善 ， 但 在 
非 线 性 估计 类 中 却 是 可 能 的 .不 过 ,由 于 这 种 非 线性 估计 在 使 用 上 
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不 天 方便 ,加 上 这 时 所 请 " 政 善 ,不 过 是 在 纤 方 损失 的 意义 下 。 而 
这 种 损失 隙 数 在 应 用 上 的 合理 性 并 非 无 可 讨论 :因此 ,这 种 非 线性 
‚ 估计 具 前 并 未 在 实际 问题 中 得 到 多 少 应 用 。 
定理 4.12 ik Y — N(X#, V), V >0 Б, >00 Ж 
知 ,8 的 维 数 为 p> 3, kX) = p < n, n №Ү RJ Йй. M| Z 
的 BLUE ñ 一 T?X'V^Y 不 是 8 的 容许 估计 ， : 
证 ， 记 残 差 平方 和 为 
9 = (Y — XÊYV (Y — XÂ). 
W S/P ~ R ESSER #-— МОВ, T, 引进 佑 
it . 
Ë= [I — (п — p + 2) 60 ТВ) CTIA. 
W| ЫР ó. 为 此 注意 
ld — Bl — 18 — £l? 
= G — p + 2) SG)" — ВТ 
— G — p + 2) 8]. 
X S: 有 密度 函数 
om |r (2z8)| (EY cnay, 
A8 
RCB, o^, Ê) — R(8, а?, É) ` 
一 人 p 二 3 -pn -13-(a-p)yup-i( "^ — P TT) 
ал (2) Ca — p + 2) 2-707 Php (22) мт 


x e dz [Teol — 8YTz 


Я (а A " 2)7v] 5 


X expl 一 [op + (z 一 g'T(z — 8)1/2c d», 
作 变 数 代 换 


w == (my, "`", Y = TY zje, u =v], 
并 令 一 (9,, `. py ES Tejo, 先 对 w 积分 ,得 
RCB, T, 8) = К(В, г", 8) 
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= ex) "(n — p 2) G р) (Сета) Lao 


— 0Yw — 1]ехр(— llo» — 81//2)4w. (4.60) 
利用 分 部 积分 法 (参看 定理 4.7 的 证 明 ), 得 


^ 


Ja Qr TY — OY worp le — OF /2)aw 
Р 
== > | dw, ` * dri deia" тр 
i=1 


x сету — Aw;T;n(w'Tw)?] 
X expC— lw — 012/2); 
= |, бет) — Jep Colle — OPP/2)aw, (4.61) 
此 处 T; 为 工 的 第 i 个 行 向 量 ， 以 (4.61) 和 信人 (4.60), 得 
RCB, а?, 8) — RCB, о, B) 
= o? (2) ?"^(g — p + 2)!(2— p) 
x | Ge Tw)7l2(o 2) — Uem( 一 le — OF/2)aw 


20, 1—0) FER 8p > > 0, 
定理 证 毕 ， 


$43 AERA FEAH 
线性 估计 的 可 容许 性 


设 了 为 可 观察 的 随机 变量 ，8 为 其 分 布 的 参数 , 6e 0 - g(6) 

为 定义 于 日 上 的 5 维 向 量 函数 。 假 定 当 用 a(a € R^) 去 估计 (Ө) 
时 ,所 受 损失 为 | | 

009), a) = (a — g(0))(a — в(9)). (462) 

《4.62) 是 一 个 请 阶 方 阵 。 ВЖ, pm 1 时 , 这 与 前 两 节 讨论 过 

的 损失 , 即 |a 一 e (0015808 DS AH p > 2 时, (4.62) 代 表 了 

一 种 不 同类 型 的 员 失 , 叫 逢 阵 损失 。 取 估计 量 (Y), 其 风险 仍 定 
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义 为 

RCO, a(Y)) 一 EoL(g(0), a(Y)) 

一 E«(a(Y) — &(8))(4(Y) — gC0)). (4.63) 
这 是 一 个 p 阶 半 正定 方 阵 . 

称 估计 量 (Y) 一 致 优 于 а,(У), 若 RO, ai(Y)) < RG, 
а(У)) 对 一 转 8€ 8@, 有 日 至 少 对 一 个 0,6 ө, R(0,ai(Y)) — R(0, 
a СУУ) 为 非 零 矩 阵 (此 处 4 < 8, 如 前 , 是 指 B — 4 为 半 正定 抵 
阵 )、 设 абу) 为 一 估计 量 , 若 不 存在 一 致 优 于 它 的 估计 量 , 则 称 
a(Y) 为 g(0) 的 可 容许 估计 , 记 为 а(Ү) ~ ge). 

线性 估计 类 的 定义 ， 以 及 线性 估计 AY 在 整个 线性 估计 类 中 
的 可 容许 性 , 仍 如 前 定义 且 仍 记 为 AY *a(0). 本 节 的 目的 就 是 
研究 在 这 种 容许 性 的 新 定义 之 下 。 线 性 估计 在 线性 估计 类 中 有 容 
许 性 的 条 件 问题 . 

(一 ) 预备 知识 

815 4.10 若 在 损失 lla — gC9) 之 下 有 Y) ~ gO) 
(2(Z) 芝 g(8))， 则 在 损失 (4.62) 之 下 * 也 有 a(Y) ~ gC9)(a(Y) 
L 
^ g(0)). 

证 ， 以 下 的 证 明 对 ~ 和 T 都 有 效 . 用 反 证 法 。 若 在 损失 
(4.62) 之 下 ,dCY) ~ 600) 不 成 立 , 则 存在 一 估计 aA) ,使 对 一 
Hoco € 

Es (Y) — g(0))(4(Y) 一 YI 
> EG) — g())(4) — 800))1 
且 当 0 = 0, 时 ,两 边 矩 阵 不 相等 .因而 
ЕСУ) — COP — Ella CY) — (Ө) 
— uL Es (CY) — #(8))(4(Ү) — g(0Y1 
— Es (AQ) — gC0))Cd(Y) — z(0))71) 
20, 对 一 切 6 8, 
且 不 等 号 当 6 一 0, 时 成 立 。 这 与 假设 矛盾 ， 因 而 证 明了 本 引 
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理 ， 
本 引 理 给 出 了 在 损失 (4.62) 之 下 ， 伟 计 的 容许 性 (在 全 体 估计 
类 中 , 以 及 在 线性 估计 类 中 ) 的 一 个 充分 条 件 . 由 此 推出 , 在 前 两 
节 中 给 出 的 容许 性 充分 条 件 , 移 至 本 节 所 考虑 的 容许 性 时 , 仍 保持 
有 效 . 但 是 引 理 4.10 的 北 不 真 ， 因 此 ,关于 在 损失 (4.62) 2 FÈ 
许 性 的 充 要 条 件 问题 仍 有 待 解决 。 吴 启 光 在 [16] 中 完满 地 解决 了 
在 线性 估计 类 中 容许 性 的 充 变 条 件 问 题 . 本 节 将 叙述 全 的 结果 。. 
关于 在 一 般 估计 类 中 容许 性 的 充 要 条 件 问题 且 前 还 没有 解决 . 
以 下 我 们 假定 了 有 形 如 (4.16) 的 结构 ,了 为 2 维 ，8 25 b E, 
有 目 条 件 (4.17) 和 (4.18) 成 立 ， 又 损失 蚁 数 取 为 (4.62)， 为 简化 文 
字 , 我 们 把 这 些 假定 综合 地 表 为 “模型 Н”, 下 一 - 引 理 与 引 理 4.7 
1924: | 
5188411 在 模型 H, 之 下 ,对 58 的 任 一 线性 估计 LY, 有 
R(S8, à, LY) > R(SB, ò, LX8), 对 一 著 8€ RP, оп > 0 
且 等 号 对 一 切 8, 史 成 立 的 充 要 条 件 是 
LLXTOX'V^. 
就 是 说 ，LY = 工 XE。 此 处 T, Â Bum X ULCA.29) X. 
证 明 与 引 理 4.7 Ж, ДЕ. 
引 理 4.12 ”在 模型 H, 之 下 :车 m xn E L=LXT XV”, 
X одфзёАХ—55&а(1Х — 5) 对 任何 常数 s， 则 作为 58 的 估 
IAY 不 可 能 一 致 优 于 LY, 
ШР. E938 4.11 ,有 
R(SB, °, AY) > RCSB, P, AXB) 
—GAXT- X A + AX — SBE CAK — Sy, 
(4.64) 
R(SB, c^, LY) = R(S8, è, LXB) 
= LXT XL + (LX 一 s) (LX — Sy, 
(4.65) 
因为 AX — S= 0, 4US LX — S W, AY 不 能 一 致 优 于 LY, 
# LX 天 3S 则 对 LX — S 作 特 征 分 解 ; 
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х=з=р(5 0) o | (4.66) 


此 处 Р, o 4r 929 md PREZE, A= diag Qi’ 5 ,4.) > 0, 
(4.64) RA НЕ AX Ж-Е LY, id B —P'(AX 一 
5)0',% 
AX — S = РР(АХ — 5)0'0 = РВО, (4.67) 
分 两 种 情况 讨论 . | 
1° в 不 能 表 为 《9 ) 的 形状 ,此 处 CG 为 + 阶 对 第 隆 .这 时 
DEE В Ку by 6 0, 使 i 半 j, 或 者 i 二 ;之 +。 对 任何 自然 数 
1,3, UR BA e1 记 一 个 1 维 列 向 量 , 除 第 i 元 为 1 外 ,其 余 各 元 
为 0, a= Penis Bu ти к0'ер = DUET k— оо Бр =й 
='[Ё(5@ 1, AXB) Xe R(SEQ, 1, 工 Y)]c 
а (AXT^X' 4' — LXT X )a + £81; — co, 
因而 AXÉ 不 能 一 致 优 于 工 Y。 
2° 存在 G — diag(rs 77.1), li В = (90). 这 时 ,由 


引 理 的 假定 及 (4.66),《4.67), 知 不 存在 常数 5, A G = hA. 因此 
”必须 2 2. 义 分 为 两 个 情况 : 
а. FE r; = 0。 因为 G 关 0 (否则 AX — 5), 故 存在 v; 
0, KERERE r 0, r,= 0, I | 
а = P(t, 1,0, -*-, 0), 
£o m ОСК, — МК|М„0,-+--, 0), c — 1, (4.68) 
将 有 当 k—> оо 时 
='{Ё{58#‹у› 1, AXB) 一 R(SBus, 1, LY)la 
= o (AXT^X'A' — LXT-X'L')a + kr? -> оо, 
b. ri 0, i= i, "0, r. 在 在 dod. dE vila cvulM. 
人 不妨 设 i = 1, j= 2, еа, Ba, о? in(4.68) RA 
180586, 1, 4X8) — (580, 1, LY)]a 
一 a (AXT-X'A' — LXT-X'L/)a 


sis dt at 


+ Cria — Th )R ao, 
34 — 00, Д, Æa, b Bib DE AXB 都 不 能 一 致 优 于 
LY. 引 理 证 毕 . 
引 理 413 # 4 20, B > 0 为 同 阶 方 阵 , 则 存在 非 异 方 阵 
P. РАР 和 РВР 都 是 对 角形 . 
W. RIRH Q, fE 
Q'(A + BO = diag(l, *--,1,0, +°, 0), (4.69) 
其 中 1 的 个 数 为 r= rk(4 + B). 分 块 
C, С, 
о'во = M с), 
此 处 C, КУЕ. н O’ (4 + В)О > O'BO М (4.69) 和 
(4.200,81 €, = 0, €,— 0, С,= О. X. C, К, WEEER 
B О, 0.С,0, 一 diag( 5,, "uv, b,). 令 


(4.70) 


ШР ЗЕ, Н. 
Р(А + ВУР = dag (1, ,1,0...,0), 
P BP = diag (bi >t 5,0, +, 0), 
祖 减 得 P'AP = diag(1— bi 55, 1—5, 0-77, 0). 引 理 证 
tE, 
引 理 4.14 id (SC. (X), 记 
A =2LXT X'L' — LXT S — ST X'L', 
B = (LX — S)T”(LX — Sy, 
这 里 Lom X n, Sim X p, X:n X p. Neuen ied T 
对 任何 a € (0, il 都 不 对 ”的 充 要 条 件 是 : ”下 述 两 条 件 成 立 一 
М, 


15 4 至 少 有 一 个 负 的 特征 根 。 


D) 这 里 有 一 点 易 引 起 误解 - 本 引 理 并 非 说 1° E. 2° 中 每 一 个 都 基 充 要 条件 (这 显 
然 不 对 ,因为 否则 1°, 2° 将 等 价 ? 而 这 不 可 能 )， 而 是 说 : 着 1 2° 成立 一 个 ， 
则 引 理 结论 成 立 ; 反 过 来 * 若 引 理 结论 成 立 * 季 件 1^9 27 必 有 一 个 得 记 满 足 、 
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2° 420, rk(4) € m, BFE ;€ J= ü: =0, 1— 
1,:*:, mj) Sk r; > 0 GEA A, т, ЖУ. 依 引 理 4.138 
dE ВЕ P $ РАР = diag (А, +++, Am); P BP = фар (ту, •••, 
ты). 

UE. 由 (5) C oM (X) 知 4, 忆 都 与 了 ”的 选择 无 关 。 
事实 上 , 拿 B 来 说 ,由 ASCA WFE D, E 5 = рх, 
dà В = (1 — р)хт-Х'(І 一 DD)', 而 我 们 已 知 ( 见 注 4.2)XT X 
与 的 选择 无 关 . 根据 同样 理由 推 知 4 对 称 ，B > 0. 

现 没 1° 成 立 , 则 存在 正 交 阵 О = (а}--+14ь), Q'AQ = 
Фар(2,, +++, 2), В. < 0， 这 时 有 

q — (1 — eB)g = b, (1—a)gBa<0 
对 任何 ac [0, 1]. Bii “4 — Q —a)B 20 对 一 切 a€ (0, 
1 六 不 成 立 . 若 条 件 2° 满足 , 则 记 P = ieia Ж 
pA— (1 — о)В]р = —(1 — а)т < 0, 
对 任何 a€ (0, 1). 
Ж “A— (Q —a)B 22 0 对 任何 «€ (0, 1)" 也 不 成 立 。 这 证 明 
了 引 理 的 充分 性 部 分 . 

现 证 必要 性 . 设 条 件 1° 和 2° 都 不 成 立 。 则 以 下 两 个 情况 必 
居 其 一 。 | 
а. 47> 0. 这 时 

PIA— (1 — a)B]P | 

一 diag(4, — (1 — a)tis *** 44, 一 (1 — a)r,). (4.71) 
因为 42 0,9 А2 0,---, 4wm > 0。 故 存在 oo€ (0, 1)， 使 
ы — (i — at; > 0, £71, Mm 这 时 4— (1 — a)B > 0 
《因此 ,断言 “4 — (1— а)В 2 0 对 一 切 a € (0, 1) KRI” E 
错误 的 ). 

b. 4 > 0, rikCA) < m, 但 т; жа 0 当 i€ J. 这 时 , 2 А= 
0, Ж B-—0 因而 4 一 (1 一 a)8 之 0 对 一 切 as。 X 1 < 
rkCA) < m, WB А; = 0 = z; = 0, 由 (4.71) 知 存在 a € (0, 1), 


Ж a—(1—a)n2m035:-l,-:,m. 故 也 有 А—(1— 
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49)B-2» 0。 这 证 明了 条 件 的 必 检 性 ,因而 证 明了 本 引 悍 ， 
(=) 容许 估计 的 条 件 


定理 4.13 RN H 下 且 设 58 可 估 , 则 Lv © 50 moss 
条 件 是 : 
| 1° L = LXT X'V^. 
2° LX 一 S; 或 者 LX = S, HAHEN ає (0, 1)， 下 式 不 
ЮМ: 
2LXT- X'L' — ST-X'L 一 LXT^S 
—(1—«XLX —S)T-(LX — SY 20, (472) 
证 。 先 考虑 充分 性 ， 设 工 为 mox s BUE. ДЕЗ 411, 
我 们 只 需 证 明 : 对 任何 Aim X n, АХ@ 不 能 一 致 优 于 LY. 分 
两 种 情况 : 
a. LX = 5, XH H (4.65), Æ Р о, LY) = ST S, 
E AX 也 等 于 5, 则 由 (4.64), 知 R(S8, e^, AXE) = ST-S', d 
4X6 不 能 一 致 优 于 工 Y。. Ж AX s= 5, 则 由 (4.64) 知 , 固定 o? ( 例 
如 , 令 e — 1) 而 适当 地 选择 8, 知 AXA 也 不 能 一 致 优 于 LY。 
b. LX = S. EE HARE 2^, 51 LXT X'L' > ST-S' 不 成 
立 。 因 若 此 式 成 立 , 将 有 
《4.72) 式 左边 LXT-X'L'--ST^S 
— ST X'L'— LXT-S 
— (0 —aYXLX — S>T (LX — SY 
= (LX — S)T (LX — $Y 
—(1—a)(LX — S)T (LX — SY 
一 a(LX —S)T(LX — 8) 20 . 
对 任何 a 22 0 成 立 * 这 与 条 件 2° 矛盾 。 因 此， 存在 非 零 向 是 c, 
使 
a(LXT-X'L' — 5Т°5”уе< 0, (4.73) 
Ж AX 一 $5, 则 由 (4.64) 和 (4.65), 知 
o'(R{0, 1, LY) — R(0, 1, 4Х#)) 


9217 • 


к= yg(LXT X'L' — ST $)a < 0, | 
因此 AXi ВЕР У. Ж AX v 5, ИКО 4.12, ЖА: 
НАК а, Ж AX —S-—a(LX — 5), W| AXÉÜ 不 能 一 致 优 于 
LY ( 引 理 4.12 的 陈述 中 是 说 AY 不 能 一 致 优 于 LY. 实际 证 明了 
AXB 不 能 一 致 优 于 LY)。 玖 可 设 AX — S —a(LX — S) 对 基 
па ЗЛИ: # [ai > 1， 则 由 (4.64) ЯП (4.65), 固定 
at= 1 并 适当 选择 8, 知 AX 不 能 一 致 优 于 LY. # а = iN 


B (4.64) #1 (4.65), SR R(S8, d’, AXE) = RCSB, >, LY). Ж 


0 aci, NJ 
R(0, 1, LY) 一 R(0, 1, AXB) 
—(1—2a)[LXT-X'L'— ST^S 
十 a(LX — S)T "(LX — Syl 
—(1—«)2LXT^X'L'— ST^X'L'C LXT^S 
— (1— aYXLX — S)T (LX — 3)]. 
| (4.74) 
因为 对 任何 ає (0, 1), (4.72) R YE, 由 (4.?4) 即 知 4X$8 不 能 
IE LY. # —1<а<0, ШЕ (4.74) 的 第 一 个 等 式 结合 
(4.73), 知 AXÉ 不 能 优 于 工 Y。 o 一 0 的 情况 相当 于 AX 一 3， 
已 于 上 讨论 过 . 因此 在 任何 情况 下 ，4X8E KERF LY. 
现 往 证 必要 福 . 车 条 件 1° 不 满足 , 则 由 引 理 4.11 知 LX 一 
致 优 于 LY。 若 条 件 2° 不 满足 , 则 LX 8, 且 存在 a € (0,1), 
使 
LXT X'L'— STS + a (LX — $)T (LX — Sy > 0. 
Ж A4-—aLXX^Oc (1 — а)5Х7, Hi(4.64)8(4.65) 08 
R(SB, 02, LY) — R(SB, о?, AXÊ) 
-(l—a[LXT-X'L'— ST^S 
+ a (LX — S)T (LX — 8)'] 
—^-(1—aDGLX — Sg(LX- Syz0, (475) 
在 推导 (4.75) 时 使 用 了 56 的 可 佑 性 , 因而 存在 D, 使 S — DX, 
d AX = aLXX X + (1 — a)DXX X = aLX + (1 — а)рх 
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-一 -一 .一 一 一 -一 一 -一 一 - 


一 LX 十 (1 一 a0)5 = ol LX — S) + S. 此 处 (4.75) 对 任何 8 
Ж > 0 Hum, Hh LX — S= 0 知 必 存 在 哆 之 0 Kh t 
(58, ci, LY) 一 RGB, ©, AXA) ЖЕНЕ ,因而 AXA 一 至 
优 于 LY。 这 说 明 : 当 条 件 1°, 2。 都 不 满足 时 ,不 能 有 LY 56, 
这 证 明了 必要 性 ,因而 证 明了 本 定理 . 

由 本 定理 及 引 理 4.14, 立 得 如 下 的 推论 : 


Жал 在 模型 月, 之 下 设 58 可 估 ， 则 LY se 的 充 要 条 
件 是 以 下 两 条 件 12, 2° 同时 和 成立; 
1° Lerxi xv, 
2° LX = 5; 或 LX +5, HAF o, b RUR: 
a. A = 2LXT X'L'— LXT^S' -ST^X'L' 至 少 有 一 个 
负 特 征 根 ; | 
b. A 2 0, К(А)< m CA HENN a, m 29 A 的 阶 数 )， 
HE PB Аа = 0 [Bor 0. ХШ lp z; IE X 535 78 4.14 Ж 
fF 2? 中 的 一 样 ,B 也 是 按 引 理 4.14 中 的 定义 . 
定理 4.13 和 系 4.7 是 吴 启 光 在 [16] 中 得 到 的 ， 这 个 定理 完满 
地 解决 了 ,在 矩阵 损失 (4.62) 之 下 , 线性 估计 在 线性 估计 类 中 容许 
性 的 问题 ， 至 于 一 个 线性 估计 在 什么 条 件 下 在 全 体 估 计 类 中 可 容 
话 , 是 一 个 尚未 解决 的 有 兴趣 的 问题 ， 


544 ”误差 方差 的 二 次 型 佑 计 的 可 容许 性 
I (在 二 次 型 佑 计 类 中 ) 


(一 ) 预备 知识 。 关 满 秩 的 情况 以 上 斤 节 讨论 了 回归 系数 
的 线性 估计 的 容许 锤 问题. 本 章 其 余部 分 将 致力 于 线性 筑 型 中 另 
一 重要 参数 一 一 误差 方差 的 估计 的 容许 性 问题 .正如 对 回归 系 
数 8 而 言 ,最 重要 最 自然 的 估计 类 是 线性 估计 类 那样 ,对 误差 方差 
中? 来 说 ， 最 重要 最 自然 的 一 类 估计 是 二 次 型 合计 .由 于 大 于 0， 
我 们 且 可 把 二 次 型 限制 为 尘 正 定 的 .在 GM BET ANIH HZ 
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УСЕН ИУ oo， 这 是 一 种 特殊 的 半 正 定 二 
次 型 估计 . 这 个 二 次 型 估计 是 一 个 半 正 定 而 非 正定 的 二 次 型 . 由 
KEAR о? > 0, 我 们 不 能 局 限于 正定 二 次 型 . 

考虑 线性 模型 | 

Y = {Yis +, Y) = XB + е = XB + Cers +++, 6n), 

X: n X p C, 8 = (8, c Be) 未知， 

eis ct, €, BI, Ee = Eg —0, Ее} = o, 

Ее} = 3, j=], s, 0, 00 < co, o^ Ж. 


| ` (4276) 

为 估计 o. АЙДА ЖЕ ЖМ? | 
LCP, a) = (4 — oye, (4.77) 
为 简化 文字 , 假定 (4.76) 和 (4,77) 总 称 为 模型 H, 容许 性 都 是 在 


损失 为 (4.77) 之 下 来 考虑 . 
以 安 记 估计 类 {У'ВҮ: B 20). W YA4YE 0, in Y'AY 


在 估计 类 多 中 有 容许 性 , 则 记 为 Y'AY os, Ж YAY 在 全 体 
估计 类 中 有 容许 性 , 则 记 为 Y'AY ~ mm， 本 节 先 考虑 在 多 中 的 容 
许 性 问题 。 这 个 问题 研究 的 历史 还 不 长 ,迄今 为 止 的 结 区 是 由 匡 
启 光 ,成 平 、 李 国 英作 出 的 (文献 [17] 与 [18])， | 

在 假设 (4.76) 中 ， 一 个 特殊 之 点 是 Ed = 0, Ed = 3. 就 
RM. es 的 前 四 阶 和 矩 与 正 态 分 布 NO, c7) ВОВЕ ВЕ. ЭХ 
HYpuRAEEHEUETE c^ 的 最 优 和 无 偏 二 次 型 估计 时 所 用 的 假设 一 
致 ( 见 [2])， 其 所 以 需要 作 这 种 候 设 ,可 以 从 下 面 关于 风险 函数 的 
计算 看 出 一 着 没有 这 个 假设 , 则 风险 函数 的 表达 式 将 大 为 复杂 ， 
而 给 以 后 的 分 析 带 来 巨大 的 困难 .由 于 这 个 原因 ， 在 更 一 般 的 候 
定 下 的 容许 性 问题 , 且 前 还 一 无 所 知 . 

引 理 4.15 ERA H 之 下 , 设 4 为 = 阶 对 称 方 阵 。 又 约定 以 
R(B,c, A) СЕВЕ Y'AY 的 风险 函数 , 则 


D) 从 容许 性 的 观点 ， 损失 函数 《4.77》 与 通常 的 平方 损失 函数 《4 一 су 并 无 区 
BI. mE 97* 这 个 因子 是 为 了 在 风险 青 达 式 上 方便 些 ， 
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RCB, 9^, A) = 2tr( A?) + (tr(A) — 1) + 40'X'A2X0 
+ 2(u(4) — 1)0'X'AX0 + (80'X'AX0, 
(4.78) 
此 处 0 = pjo. | 
证 .由 损失 函数 的 形状 (4.77), 有 
R(B, à, A) = E(Y'AY — ?Y]o* 
= E[(Y'AYY/jo* —2Y'AY]oó + 11, | (479) 
їп == X8 = (5, Жу E.) = 0ХӨ, 并 以 a; li A 的 G, j) 元 ， 
有 š 
ECY'AYY = E[(e + E) A(e + Еур 
= (SF AE) + E(c'Aey + +Е(Е'Асе' АЕ) 
+ 2F'ASE(e Ae) + AE(E Mec 46), (4.80) 
由 于 aj * ais H | 
3055, M 了 一 了 一 大 一 ?， 
E(z; e; ek ei) = о 4 ;, js А, 1 可 分 为 两 对 不 同 的 足 标 ， 
0, 其 他 情况 ， 
则 有 
E(c'Aecy = E ( > 


,tl 


PI to (Fron 
十 >19 aj t > a) 


a*[CtrA)? 十 "or š (4.81) 
ECE Ace АУ) = ОЕ АЕ = o'0'X' AXO, (4.82) 
E(e Ae) = п[4Е(ее')] = о?и(А4А), (4.83) 
Е(гАее' Ас) == 0, (4.84) 


以 (4.81) 一 (4.84) 代 人 (4.80) ,并 注意 £ = 0X0, ж 
ECY'AY)! = o*(9'X'AXOY' + PLAY + 2u(47)1 


ан GORI C; Cj Cx а) 


ке 


+ 4o'0 X' 4X0 + 20'w(A)0X'AX0, — (4.85) 
又 不 难 算出 
E(Y'AY) = ortr(A) + PO'X'AXO. (4.86) 
以 (4.85) 和 (4.86) 代 入 (4.79), 即 得 (4.78)， 引 理 还 毕 . 
下 一 引 理 的 作用 类 似 引 理 4.4. 
ELE Xx 422 0,4; 为 4 的 最 大 特征 根 ， B 24, +u(A) 


. XX B> 0 满足 
| petes + [u(B) 一 ] < = 2:042) + Теса) — I, (4.87). 
B x A. (4.88) 
则 必 有 4=— В. 


证 ， 找 正 交 阵 P， & РАР = Adag Chis tt Res 0, n, 
0), 此 处 a Dee 204,270, 4 С = Р'ВР, (4.87) ЯП (4.88) 
分 别 等 价 于 | , 
Aeg) e pecu e 2u(A?) + [tr (À) — 17°, (4.89) 


G « As o (4.90) 
而 要 证 的 事实 (4 一 B) 转化 为 Gm A, 由 (4.90) 知 
| G = А‹<=ти(С) = ulA) ` (4.91). 
用 反 证 法 , 设 u(G) SE (A). 由 (4.90), 这 时 必 有 | 
tr( G) < (Л), : : (4.92) 


作 正 交 阵 О, O'GQ=4isg(z;, tr 0,5,0), Шт > 0, 
¿= l, ,r+ 由 (4.88) 知 r < z, ЖО 分 块 : 
Qu Qu 9 
о -| о, On O5 ) ; 

ЖИР Qa Qu Qs Г 

其 中 Ous 0,0 Qs 分 别 为 r, G 一 r) 和 ( 一 已 阶 方 阵 . 记 С, 
diag (zi ，z)。 由 (4.90》 有 
ms QuGQu Оһб,Оһ ОһС,О„ 
Фа (2, eee, Ais 0, >25 0) (nao. 2.6.0. 06,0, ) 


2 BG Qu Q Кей Qu Q 56,0 13 
(4.93) 
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由 此 得 到 05G,0, = 0. 再 由 G > 0 41 Q5 = 0. 因而 
(04104) (Qai O02) = 1,. ег t BEZPE 
Da Qu 
da 
id D = diag (lis +, А), С, = diag (rú +з, To D, 555, 0), 
С, 的 阶 数 为 上 则 (4.93) 可 窟 为 
DO M'GM 0 
p m 2 ( о о ). 
Bi E (4.92) 8 | 
DIM'GM, v(D)-u(G,). (4.94) 
Pu ' 
u(L/G 2) — G) u(1/G 2-2) – р), (495) 
їп I = G + 2) 4, i= G + 2) 6, i= L, е, 此 
处 约定 r = ет = 0, Xi = (L, 405 š = 
(а, 775 ғ.у, А == (A, А79 à). ó 一 (т, D t T. 于 是 
(4-95) 成 为 
1? > L. (4.96) 
此 处 二 记 * 维 行 向 量 (1, 1, …，1)， 记 
D-—al—D, б,=мМ1—6С, 
则 由 (4.94) 得 D < M'GM. 从 Б> 0 得 G, 2 0,9E PRG 
P: < D^M'GMD^, . 
M'GM DM'GI^M < M'GIMM'GMM'GI^M ` 
= M'GM, 
因而 
tr( 7) < n( D'IM'G,M D) = т(мМ'бемЮмМ'сС\м) 
< u(M'GIM) = (GD, : 


m 3G — 1) < Y. — n. dde — (4-2), BU 
不 等 式 得 
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2A'À + 4al, i x 256 + 401,2, (4.97) 
HRE 24 + tr(4) = 1, 并 注意 到 (4) == tr(D), 有 


1 
22, + У) v; = 22, + lG) < 22, + tr(D) 
1 


г 
= 22, + J xsl, 
1 


得 1⁄2 + EË > 4a， 从 而 推出 
(у — (LIY = (12 + 1200055 — 1) 
=> 44(1,$ — 1i). 
НЕҢ (4.97), : 
2À'À < 282 + 42 (1; — 1⁄4) «225 + (3⁄2): EAP 
因而 有 
2% + (y! + 2G + 2)! < 2272 + (1232 + 2G + 2), 
Rj . 
2tr( A?) + (tr( A) — 1] < 2trÇB2) + [tr ( B) — 11, 
这 与 (4.87) 了 矛盾 ;因而 证 明了 本 引 理 . . 
利用 这 个 引 理 不 难 证 明 如 干 的 结果 : 
在 模型 H, 下， 又 假定 Xx 为 * 阶 满 秩 方 阵 ， 则 


YAY — P 的 充 要 条 件 为 


22, + tr( A) < 1, (4.98) 
ЖЖ A. 285 4 ИЧЕ FEE SL, 
证 。 先 证 条 件 的 充分 性 . 若 存 在 Y BY € 多 一 致 优 于 YAY, 


MHK 4.15, 将 有 
2u(B?) + [w(B) — 11? + 48 ВЕ 
+ 2[u(B) — 1]8 BE + (E BEY 
< 2u CA?) 十 [tr(4) — 1P + 4425 
+ 2[tr(A) — 11748 + (РА)? (4.99) 
对 一 切 E= X0€ R^, E 62220 mar. HEBER 
2u( B^) + [tr (B) — 1) si2u(47) + [tr (A) — 1р, (4.100) 
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B < 4, (4.101) 

HX E. (4.9): 5 — 0, 804.100). XE (4.101) RR, 

ДИЕТЕ & 0 使 EBE, > BAB. 4 £ = КЕ, H.E Z 382 K 

《4.99 ) 将 不 能 成 立 .这 证 明了 (4.101). 于 是 由 引 理 4.15 知 B 一 4. 
这 证 明了 条 件 的 充分 性 . 

为 证 必要 性 ,用 反 证 法 . 设 (4.98) 不 对 ， 找 正 交 阵 了, 致 4 = 

P'AP, А == diag (А, -453 4,) їп ALZ8 Z8 А, 22 0. h (4.98) 


E] 
AI 2,270, B a€ (0, 4,9, St 3a + 2>1 2 > 1, 记 ф = PX0 = 
2 š 


(Ф, "seg r^ X B= P'diag (а, as ters АР. 则 B > 0, 
且 
R(8, 0, 4) — R(E, a, B) 


- (54 34 2 3s-2a.- a) 
+ 4G1 — а) + 2G, — а) (2 4 - 1) 
£201 IA + 20, — a) У) 1,41 | 
+Ò aat st n а) G, — а) 
2 — a) (за + «+ $ь—2) 


+ 2(,-— з ($ 1, — 1 + 32, + за) 
=> 0 | 
对 一 切 $e Ra 成 立 ， 这 与 Y'AY ^ o^ 矛盾 ， 办 而 证 明了 必要 
性 。 定 理 证 毕 - 
X48 设 Y~ NXP PV), 此 处 X 为 已 知 # 阶 满 秩 方 隆 ， 
V 20 BA o > 0 未 知 , 则 在 损失 (4.77) 之 下 ，Y'AY ^a? 的 充 
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p 


要 条 件 为 24, + tr(47) « 1, 此 处 为 V'^AV'^ 的 最 大 特征 
根 ( 即 AV. 的 最 大 特征 根 ). I 
ЇЕ. 52 = УЗУ, Z~N(V "xg, Pla), Z HE (4.76) 


中 加 在 Y 上 的 全 部 条 件 ,又 -WX| 60. 5 Yay e 


Z'V:2 102 5 ,用 定理 4.14 即 证 得 所 要 结果 . 
注 4.4 着 将 参数 空间 限制 为 | 
8 一 (CA. dit Bas r):0 «o < 90 max] 8, gil Го? < ky, 


此 处 k > 0 为 一 给 定 的 常数 , 则 定理 4.14 RR 4.8 MRU. ME 
指出 , 这 个 参数 空间 容许 一 种 有 实际 意义 的 解释 ， 以 X = I, 29 
例 ,; 在 各 次 观测 中 ,不 必 能 保持 总 体 均值 不 变 ， 但 要 求 其 变化 程度 
Eo 比 ,不 超过 一 定 限 度 。 在 这 种 情况 下 , 方差 估计 问题 有 其 实 
БАЕ Ж. 

(=) - 6 X: 必要 条 件 пиана. 先 证 明 
ЛАА Я. 

引 理 4.17 1° {Ей H, ZF, 记 Р=Х(Х'Хух', 5 = 
Y'U —P)Y, r= (X), Bl S/(o — r + 2) ^з 

2° 7 4220, АХ — 0, Æ 49 Р, +1), AJ 


Y4Y Š о? 不成立 (P, e Bg УА) 1°). ` 
dE. Hb S^ 的 定义 及 (4.78)， 算 出 S'/(n — r + 2) OARA 
数 为 常数 2/(я — r +2). 当 420, AX 90 时 ,可 找到 使 
0.X'AX0, > 0. 取 Bo 使 glo = КӨ, Н. k JE, ЩН (4.78) 
将 得 RGE, 2, 4) 2 2/00 一 7 十 2)， 因 而 Y'AY 不 能 一 致 优 于 
Sn — r + 2). = 420, АХ —9, HA А, itta А wa 
as WA g&n — rk(X) ~ar, Wim 
(2, dix P» 5 ` 
R(E, т, а = 2u(A?) + [tr(4) — T 
= 244 + (1,4 — 1P 
= (а — 1.104 + 2))'GQIL, + 1141) G 
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æm — WT 


— 1,/(q + 2)) + 2/(q + 2) 

Z= 2/(q + 2) > 2/(n — r + 2). 
FERVE ЖЯ E 2= nr, ¿= (n — r+ 25. 而 
M ап г ËB 1=1,/(sn— r+ 2) B, (о — r + 2)4 是 往 
(X) 的 投影 变换 拖 阵 ; 故 4 = (I — Р) Со 一 + 十 2)。 因 此 
.一 举证 明了 引 理 的 19 和 2°, 

引 理 4.48 EREA ZTE Улу 50°, W) YAY 必 有 
形式 B 
` as + Ёх'вхё# = Y'[a(7 — P) + PBP]Y, (4.102) 
此 处 P X(OXCX) X, É XE BD LS (5M, 2 220, ЖЕ B > 0, 
B#D а, m9 > 2, > 0 记 PBP 的 非 零 特征 根 时 ， 有 


(n — r)a + > А; + 2шах(а, àa) < ha r = 002 < n, 


iE. 取 : 
ав, = [tr(4) — tr(PAP)]/Cn — r) 
- tf 人 — P)a^1/(s — r) > 0, 
往 证 若 4 不 为 U 一 P) 十 PBP《 对 某 数 “ 0, 矩阵 B 22 0)2. 
形 时 ，YFEaol1 一 Р) + PAP)Y: 将 一 元 优 于 YAY. }8(4&7%)% 
算得 : 
RCB: 02, 4) — R(B, o^, ре? — P) + PAP) 
= 2tr(4?) — 2[o(AI7(1 — Р) А2) (ә — r) 
— Zu(PAPA) + 49'X' A(I — P)4X8 
Zw) — 2[ur( AAI — PJAT] (а — ғ) 


— 2t (PAPA), . | (4.103) 
且 等 号 对 一 切 0 成 立 的 充 要 条 件 是 | | | 
(1 — Р)АР = 0, (4.104) 


由 CAPAY^(I — Р)( АРАУ? zm 0 得 
оС — PAY] = A’ — 2APA + APAP) 
=< (4? — APAP), (4.105) 
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mr: Lerma mas .... 


B ж = p VL OU jc 2 Ж PE RE 

: 《了 一 P) APA)? = Ü. (4.106) 
以 bis tety bq 记 F da € E p)4'^ 的 全 部 非 0 特征 根 , 则 有 4 = 
n—r,H 


lirl APU 一 PAAT == (3 2 


可 a 
< 9 +R =a 
1 


< (s — r) У) 8 — (n — rj (AAU — PAPY] 
f (4.107) 
且 等 号 成 立 的 充 要 条 件 是 
| AP 一 P)4 一 0， 或 者 
AU (I — PAY з 0, (Hb ob q> n — r. 
| (4.108) 
H (4.103) — (4.108), 48 XIX] — Ul 6, а Ж | 
R(B, 9,4) — R(g, P, „(1 — P) + РАР) 220, (4.109) 
且 等 号 成 立 的 条 件 是 : (4.104), (4.106) N (4.108) 同时 成 立 ， 
不 难 证 明 ， 由 (4.104) 推 出 (4.106). 事实 上 ， 由 (4.104) 知 (7 一 
P)APA(I — Р) = 0, 
0 = [C] — P)4PACI — Р)1 
= САРА) (I — Р)САРА УЛ, 
由 此 并 注意 到 《1 — Py — 1 — Р, ту (4.106). 

故 为 证 Y'4Y Җ (4.102) ИЖ, ЯЯ: 当 (4.104) 和 
(4.108) 成 立时 ,存在 数 a 20 МН B 220, {E A= a Р) 
十 PBP。 设 (4.108) 的 第 一 条 满足 . 则 有 (I 一 P)4 = 0, AA 一 
Р) 一 0, 从 而 

A = (1 — p + P)A(I — P +P) = РАР. 
取 а= 0, В = 4 В, XECA.LL08) 0136 W E LATIO CL 
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P)4'^ 的 唯一 的 《x 一 + 重 的 ) 非 o 特征 根 记 为 a. 但 (1 — P)A 
XU 一 了 ) 的 全 部 非 o 特征 根 等 于 4( 一 PY BB 4(1 一 站 的 全 
部 非 0 特征 根 , 而 后 者 又 等 于 (通过 表 4(1 — P) 为 SAPU 
PAPO — P)A'^ 的 全 部 非 零 特征 根 ， 因 此 

rk|[(1 — P)4(1 — P)] = л — ғ 
H ( —P)AG 一 P) 的 非 零 特征 根 只 有 a XF EE 《1 一 
PAU 一 P)ja Ж СХ) 的 投影 变换 阵 , 因 此 证 有 明了 

(2 — PAU —P)ja=1—P, 
再 由 (4.104) 得 | 

A= (1 — P + P)ACI — P -E P) = «(1 — P) + PAP, j 

朋 所 欲 证 ， 最 后 。 往 证 4 的 表达 式 aU — P) + PBP th, В Е 
引 理 中 指出 的 条 件 。 找 正 交 阵 0, 使 PBP = 0'diag (hetta lgs 
0,.…,0)0, id ОХӨ m a me (а, ao DUI 


Е(#, >, a(1 — Р) + PBP) = 2(n — r)a +2 У М 
+ [e-+ 311, — 1] "EMT. 


T 2e — r)a + > АМ Ц 2 Aoi + (> ud). 


(4.110) 
用 反 证 法 . 设 а, 3.05.2. 不 满足 引 理 中 之 条 件 ， 分 两 个 情 
ўт: 


4 
а, п 22 À, В aE (0, 0)9, (я — r + 2)а + Ў) il, 
1 


由 (4.110》 有 
© R(f,a', a(1 — P) + PBP) — R(B, 0°, a,(1 — P) + PBP) 


1) 必 有 a>0， 因 为 , # 2—0. 则 由 SALSE ЭП А = 0, # 4, = --- = 
А, 一 0. 这 时 引 理 中 条 件 显然 满足 ， | 
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= (n 一 r)(a 一 1С — 62) (а Ба) + 2 >: À; — 2] 


+ 2(n — *)(в — a) > о > 0. | 
因而 aS + PX BX 将 一 致 优 于 а5 PX'BXÉ. BERRE 
Sim. | Ж 

b. a < ji. РЄ (0, 4. f (n — r)a + 35 + > 1; > 1, 


XEHUBM C > 0 满足 
”PCP = Q'disg(b, has 10 7,000, (4111) 
ik KC 的 存在 的 证 明 见 下 . 8604.110), (4.111) A | 
R(B, ò, «(1 — Р) + PBP) — R(8, à; a(1 — P) + PCP) 


- (2—0) [26 — еза, + 2 + 2 32 — 2] | 
+2(— в) Ў) аа +2 [о — r)a + 302, 9) 
e ias Цо, — pa + [ G, + оа 


4 
+ ш] — а> в, 
2 


这 样 aS + BX'CXB 将 一 致 优 于 aS + PX'BXÓ, SAFA. 
剩 下 证 明 适 合 (4.111) 的 C 之 0 存在 . 为 此 , 记 


: QP == Wm W = (i ws); и; = BU. im], , n. 
| pu W BW" = diag (A, 655, 40 0, 0, 5,0), 因而 uo se 
两 两 正 交 , 非 零 ,而 uan 一 一 姑 一 0。 找 # 一 9 个 向 量 =], 


二 1 一 4 使 


为 满 秩 方 阵 。 T 
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= (Мы nini o 1ш4101+--10) — (оа); 
最 后 , 令 C= B"(VU'Y(VU")B^, 有 
WCW'-—WB^(VU-y(VU?)B'^Ww', 
di VU^U = V # VU u= v, i=l, 5, д, 4 
(VU O)(BWw"') = (ni-ini0b--.-i0) 

= NIKA Ini ГУНН +10). 
由 шут, ws 两 两 正 交 ， 长 分 别 为 Vl sero ja 得 

WCW = diàg(b, 13, 2 0-55, 0). ` 
再 以 W = oP 代入 并 注意 0 为 正 冯 阵 ， 郧 得 《4.111)。 这 完成 了 
引 理 的 证 明 . 

为 证 明 下 一 引 理 ， 先 作 一 点 准备 。 构造 x 阶 正 交 阵 Q 一 

(0,102, c) жы A (0). 记 QiX0, 则 有 
ХӨ = 00'ХӨ = О,0,ХӘ = Оу. 
注意 到 rk(O1X) = rk(X) = +, 314 Ө шы R^ 时 ,? 跑 遍 R (ТЕ 
Ж 0 = в/о). АРН (X) 的 投影 阵 ， 故 即 为 向 2€ CQ) 
的 投影 阵 ; 改 P = 90.(0101) 0: 一 0.0: if 
R(8, à, a (I — P) + PBP) 
— 2(n — r)a’ + 2w[(Q1BQ,Y] 

[Co — r)a + и(О,ВО,) 一 TI 

+ ХОВО, Y» + (Q'01BOaYy 

十 2[( — r)a + tr(01BQ,) — 1] 0:80). (4.112) 
在 以 下 ,P, О,, ;的 意义 均 如 此 处 ,不 另 作 说 明 . 

AU BIRO kj, О:ВО, 5 PBP 有 相同 的 非 0 特征 很， 
事实 上 , 表 8 为 B = С'С, BJ PBP = 0,0:С'С0,0. 而 后 者 与 
C0,0:10,01C' PB C 91,91C”” 有 相同 非 零 特征 根 9， 但 后 者 叉 与 
ОССО, 即 918 0， 有 相 辣 非 零 特征 根 。 

引 理 4.19 $i 3:38 a 0. EBE BO. DL mem 


D WERE. ж AB 和 BA 都 有 意义 ， 则 它们 有 完全 一 样 的 非 疏 特征 根 。 
这 一 事实 在 前 面 已 用 过 了 ， 
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1,220 jd PBP 的 全 部 非 0 特征 根 《 即 : o m Boi A тук), Æ 
有 " 
— (n — r + 2)а + a + 2(s — r + 2)e3, 
— Sua + 214 Y 4; « 0, (4.113) 
1 1 


则 在 模型 H, Z F, aS + P'X'BXB 不 是 的 可 容许 估计 . 

WE. A 0.80, 与 PBP 有 同样 的 非 9 特征 根 , 故 存在 正 交 阵 
T, 3k 0.В0, 一 T'diag (м, ttt, Aas 05 50, DT. 记 Ty = 
£ = (Š, `", БО. ШЕН (4.112), 


R(E, ò, a (1 — P) + РВР) = 209 — De + 2 91 
+ [6 — ra + Sa-i + 4 S ug 


十 2G — r)a + РЭ 1, — Ц * AE) + (> ug). 
E ¿€ (0, 1), a > 0, 8 I 
R(B, œ, a (1 — P) + PBP) 
— R(8, cà, «(1 — P) + 5РВР) 


= 20 — DG б +за — у Pad - 
+|e- + Sai] 
—[@—де+» 4-1] 
+40 — 6) 3 aug 
2 e+ Q2) D u 
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— (5 一 r)ab -— (1—5)] 5 Ai 


+ (1 — P) (uy ， 
> 2(»— rs — a?) + 2(1 — #)4 
+ [(— r)a + c — 1 
— [Ca — rja + be — 11 + 4(1— 92, > 1,8? 
+ 2{(я — r)a + (1 — Pc — (n — r)ob 


==) S ug 
+G - 5 (> ый) (4114) 
对 一 切 $e R'《 即 对 一 切 Be RP, 0 < e^ < co), 2 = D 31, 


4 4 
с Ўра. (пе) > 号 后 的 表达 式 是 $548 йж Ж, 
其 判别 式 记 为 A， 便 有 | | 
A/4 = [(n — r)a + (1 — P)c — (n — r)ab 
—(1—2) +201 — P)uD 
— (1 — PH 2(a — r)? 一 o?) + 2(1 — bd 
+ [a — r)a + c — 1]: — [lan — rja + 2e — 111, 
谷 证 引 理 成 立 * 员 需 证 在 引 理 条 件 下 ,存在 ¿e€ (0, 1) fio > 0, 
$t AD. 现 对 给 定 的 а, b, Ау ++, Аду A/4 作为 “的 函数 
在 | | 
а = [(n — rab + (1 — b) + 2(1 — £)534/ 
[s — r + 2(1— 9] | (4.115) 
处 达到 最 人 小， 在 A/4 的 表达 式 中 以 a К “经 过 一 些 计 算得 到 
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Als = r +201 — 5/41 — 9) 
= (i --b)g(a, bs А, rn hg) 
+ 8(2 — rl — (n — r + 2)а? + a 
+ 2(z — r + 23822 — d — 244 + 2М4с], 
此 处 (а, b, lis 07521) 是 a, É, А, ttt 1 的 多 项 式 。 因为 
Шав (1 — P)g(a, b, lis *** > Аа) = 0, 
故 当 —(n— r +2) + a + 2(n — r + 2)a1L, — d — 21, + 
22, < 0 时 ,存在 5€ (0, 1) 和 as 一 28|, Br A < 0, 5E 
得 证 | | 
{#45 ща=0 8 22, 211 <1 W, (%113) 显然 满 
: 


R, Eb, ЁХ'ВХЁ(В > 0) ЖОЖ = BRAVE. 

综合 引 理 4.17 一 一 引 理 4.19 ,得 到 下 述 定理 : 

定理 4.15 ”在 模型 玩 之 下 , 若 ҮЛҮ 20,1 

Y'AY = aS + ЁХ'ВХё, ^ (4116) 

1? 34 PBP = 0 К,а = (n — + + 2)7 CEHA P ER ACX) 
投影 变换 的 矩阵 ). | | 

2° Mb rk(PBP) = 4 > 1 Ff, РВР 的 全 部 非 0 特征 根 2,2 
¿,2> --- 204020 与 一 起 适合 以 下 两 式 : . 


(n — r)a + > а + 2max(a, à) 1 (е = ж(х)), 


(4.117) 
— (5n — r + 2)а + a + 2(n — r + 2), 


UN S 


4 4 
— X121— 24, + 22 2 2 0, (4.118) . 
工 i 1 


X49 E Y-N(XLoV), V > 0 БЯ. FERRER 
(4.77) 之 下 ;YAY ^ a, fl 
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V'AY = а + ЁХ'УСӨВҮ ХР, 
此 处 ( 记 P = (УХ) 投影 变换 的 矩阵 ) 
È = yiyo — P) Y, B—(XV?OX)XV^Y, 
数 a 0, Ж B > 0 满足 以 下 的 限制 : 当 PBP — 0 时 = 一 
(в — r + 2 t, r = rk(X); 4 rk(PBP) —42 1 时 ,$B 的 
3E 0 特征 根 2, 29 281,77 0 及 “满足 (4.117) 和 (4.118). 


注 46 定理 4.15 中 的 条 件 不 是 Y'AY т 的 充分 条 件 ，- 
例如 ; 当 


4 
422, > a> 0, (в — r)a + $241 Ж (4.118) 
1 5 


ШЕН. aS 十 ÀX'BXÉ ~P 不成立。 为 此 找 正 交 阵 T, E 
QiBQ, = T'diag Qs 5555 да, 0, 777, ODT (Q, 的 定义 见 前 )， W 
в, è M C >0,{# | 

a <b <à (s= r)a + L= (n — r)a, + Ë 

QI ICO, = T'diag (b, hs `", 24,0, tts ОТ. 
W Ta = E = (Ë,, 有) 握 (4.112) 式 ,有 

RB, а?, a(1 — Р) + PBP) 
— R(8, d^, a.(1 — P) + PCP) 
= 2(s — 1)! — aD + 201 — P) 


0 [255+ + юн] B 
+2[(S „-1) = Б) + (n — r)aà2, ` 
К ЗСА — P) iala = а | B. X (4 119) 


B upa Dac da E a= [G — r)a + à, — Í 
BG — ғ), f8 
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(53-1) —ю + б ед 


T3(1— 52) — (л — r)ab 
= —[(n — r)a + 34,](4, — Р) + (n — r)a3, 

+ 3(22 — 29) — [Ca — r)ab + hb — 57] 
= 2b, — b) > 0, (4.120) 

2(s — r)(a2— а?) + 2(22 — 22) | : 
= 2n — r)(a + а)ба — aj) + 2(4, + 5)(2, — 5) 
= 2(a + а,)(% — А) + 2(4, + DG, — Б) 
= 2G, — B) + b — a — a) | 
= 204, — b)i + 5 а — a — G, — PD (а — ғ)] 
RE | (4.121) 
由 (4.119)--《4.121), 得 
R(B, os a(1 — P) + PBP) 
— Е(8, P, (1 — P) + PCP) > 0 


对 一 切 8, c, Elf oS + PX'BXB ^ 不成立. 
顺便 指出 ， 满 足 所 述 条 件 的 e. 32.2. 存在 ;如 4 — 2, 
a = B/[8(n — r) + 33], 1, = 40/3, А. — a/8。 就 是 一 例 . 
(=) -M X: 充分 条 件 
引 理 420 АЕН, Е, a+ XBX n 不 成 立 
(0220, B Z0), WT ЖЕЛЕ ЕЗ 
Ово, -— T'diag( 44, -uey fgs 0, ttg OT, 
à er > ¿, > 0, 
则 必 存 在 a > 0, b, 22 0, ---, 5.280, ЮЕ C > 0, 满 足 
О(сО, = T'diag(b,, --*, 55,0, +: 0) T 
使 aS + ЁХ'СХЁ BRF aS + PX'BXÉ. 
Е. В aS PXB 多 不成立, 由 引 理 4.18 RI 4.19 的 
证 明 过 程 知 ;存在 a> 0 K Čo, E a + ХСХ 一 致 优 
F a+ #Х'ВХЁ. 记 ,Gg 为 也 一 TOIGDT 的 前 4 
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DERAH. 4 
С = Q,T'diag (diss, de, бус, OTO 
往 证 
R(B, о, a, (1 — Р) + PCP) 
< (В, o°, a (1 — Р) + PBP) (4.122) 
对 一 切 8, с? RA HEDH 8, o 的 一 组 值 有 严格 不 等 号 。 只 需 


讨论 (а — r)a + > м + 20 < 1 的 情形 ,此 处 ó=max(a,2,), 


注意 到 
Е(#, о?, a, (1 — P) + PCP) 
= 2(s — r)a + 2tr(D2) 
+ [Ca — r)a, + (D) — 1]! + 4F'D*E 
+ 2[G@ — r)a + (D) — ПЕРЕ + (EDEP, 
此 处 £ == (A... š) = Т, FR. 
R(B, c, a (1 一 P) + PBP) = 2(n 一 r)a? 


q 4 1 
+2Ď u+ [e-u] 
1 1 
十 45 фар (41, ttt 42, 0, **5, 0)8 
9 
+. |G— + 72-1] 
1 


X £'diag (ls -**, 24, 0---, 0)E 

+ Гав (1, +++, Aas 0, ---, DEP, 
由 aS PX'CXÉ 一 致 做 于 aS + PX'BXÉ 知 dag (а, :--, 
1e 0, 7,0) 2D, ii D > 0, RKE 

p= (° s diag (2,, ***, ы) 2D, 
其 中 D, > 0 为 4g 阶 方 阵 . 
当 妃 为 对 角形 时 ,显然 有 
T'diag(di,- - -, do, 0, +-+, OT = OCO, ~ OiCO,, 

故 (4.122) 成 立 。 
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当 妨 不 为 对 角形 时 ,由 diaga +++, 40) 2 D, 2 0,81 1, > 
di, 一 LLL q; EFE i 使 Д, > dj, jÉ = = (ë, `... ғ), 
1 — G; treg 12, d = (dá, dg), 并 定义 ®: 
gla) = R(@.=', a (1 — Р) + PBP) 
— R(E; P, a (I —P)+PCP) | 
= 2(n — r)(a? — a2) + 221 
+ [Gn — r)a + 1⁄4 — 1P — 244 
— [Cs — r)a — 122 — 1 


+ 45 8 452 B 
+ 2[C€» — rja + 1⁄4 — 1]2'« 
— 2[(n — rja, + 14d — 1]2'a 
+ o'la — a'dd'a, (4.123) 
为 证 (4.122) 成 立 ,我们 仅 需 证 明 存 在 i ЖП So, tE g(a) 的 最 小 值 在 
5i = Eh. 8 = 0 当 j 所 二 处 达到 . 因为 , 若 这 一 点 成 立 , HAIN D 
不 是 对 角 阵 ,有 : (D) > 24, Mif 
gla) > g0, 50, Eos 0, 777,0) 
> [R(8, č, a(I. — P) + PBP) 
— R(8, Z, (1 — Р) + PČP)] о-оо 
= 0, 
这 就 是 (4.122)， 以 下 分 两 种 情况 讨论 . 
а. 2,2 dj, i 1, 4， 这 时 由 (4.123) 可 知 
gla) 22 2(n — "а? — a +211 ` 
+ [ә — r)a + 1⁄4 — 1]° — 244 
— Ко — rja, + 1,4 — 112 


4 
+ 2[( — r)a + 321 — 112, У 8 
1 


+ 2[1 — (a — r)a — kuala >; ё 
1 
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+ min (22 — d a'a, 
i«i«« 


此 处 
0， 当 1 > (s — r)a, + 124, 
= | max di, 其 他 情况 。 
16/60 | 
m (35g) < e, 因此 
gla) Z 2(n — r)(a? — а?) + 242 
+ [n 一 r)a 十 14 — 1]? — 24'4 
一 [kz — r)a, + 1,4 — 1р 
+ 2[(s — r)a + 14 — 112, V qoa 
+ 2[1 — (n — r)a, — 1,012 y gda 
+ min (22 — di)a'o, 
1< r ag 


因此 Em g(e) = co。 故 存在 L > 0, eX lal > L W, e) 


Па . 


gCO. HIT gle) 为 & 的 连续 函数 , 政 & 在 集 А, = (а: |91 < L; 
上 取 到 其 最 小 值 ,后 者 也 是 8 在 全 空间 上 的 最 小 值 。 现 有 
0g/0o & (Og/05i, --- 8g/85;)' 
-2[(s — r)a + 1; — 1112 
— 2[(n — r)a, + 124 — 114 


+ 4022, * 5, BY — 4(21, c, aY 


+ 24a, | (4.124) 
Ө? {до = (дї BROEN ie e = 24, 
此 处 ` 
A = (АА; — 44 im sq АА — dd', (4425) 
易 见 


А20 «<= 存在 + 使 0/0 = r, :5-1,.-5,9. (4126) 
EREA (4.126) 右 端 对 ， 则 4 = (L — AJar 22 0 (ЕЖ, 由 
¿> di 2 0 5] 0 << < 1). RŽ (4.126) 右 端 不 成 立 ,不 失 
ЖЗ 423 dh, Щй z, = — (4 — di) '"(1,4,—d,4), 
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s, = (11 — 40), 有 
(а\, z, 0, +++, ODA 2,,0, 7:7, 0Y 
一 — (44, — 2А) < 0, 
BB 4 20 ЖИЛ, ЛЕВА Т (4.126). 
当 4 非 半 正 定时 ,8 在 {oe 一 Се Еу: С> 0, i=l, 
4} 上 取 不 到 最 小 值 ,但 前 已 证 明 ， 存 在 L > 0, 使 在 4z 上 能 达 
到 最 小 。 因 此 在 在 足 标 s <i <... in ERAR ER 
Ww 一 {а = (GA trt ED, = 0, j=l, з. Å} (4.127) 
上 能 取 到 最 小 值 ， 若 4 2 0, 则 由 (4.124) 一 (4.126)《 右 端 ), 方 程 
Əg/Əe = 0 成 为 
[Ca — ғ)о + ПА — 114 + 2(1 — x + А) 
— [65 — r)a, + 14 — 1]zi-t (1 — r’) a — 0, 
о НАЕ (и, +, AD m w (s tta A ЖЭШ 
Же. BTF 1,2 0 这 只 在 setts 2, 同 为 一 常数 ú > 时 才 
可 能 。 但 当 Ed ¿ç = и 时 ,有 
g(a) = 2(n — ғ)(а? — a1) + 24(1 — з?) 
+ [(л — r)a + 44 — 1]? 
— [€ — r)a + gx — 1]% 
+ 2[(0 — r)a + (q + 2) 


" 
— 1 — (n — r)a — (9 + 2)x!u + rlu >, E 
| 1 


£- »e(3; &). 


其 最 小 值 可 在 , 鲍 如 :点 (8, 0, +... 0) 处 达到 ,其 中 
0, Щ (n — r)(a — ax) + (4 + 2)и(1 — x?) 
= (1 — х) > 0, 
[(» — £)ax — (в — r)a — (q + 2)«(1 — x?) 
*O-—:)/«(1— +) 其 他 情况 . 
H A... 不 全 相同 时 ， 函数 & 在 集 {a = Gis өз, £: 
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&т>0, i = 1，……, 9} 上 将 达 不 到 极 值 。 与 前 面 类 做 的 讨论 给 
H, 存在 形 如 《4.127) EW, (s z 在 WW 上 能 取 到 其 最 小 值 。 记 
i. tt, js) = {1, 2, -rty aY \ [is eg ik). Ni Æw 上 ， £ 是 
(Go. 510 的 函数 。 对 它 重 复 以 上 的 论证 并 在 必要 时 继续 做 
下 去 ,最 后 将 得 出 ; 函数 E 的 最 小 值 在 基 一 形 如 
И, = {о = (0, - 5, 0, 2, 0, "0, 0) 70 =< 22 со} 
上 到 到 其 最 小 值 . 但 在 环 ; 上, g 27 КАЕ, 它 必 然 在 某 
点 š = Sh 处 取 到 其 最 小 值 。 这 就 是 所 要 证 明 的 ，. 
Ь. 存在 i, 使 А = di BEH, 必 存 在 j, 合 а> dj WE 
普遍 性 , 设 
à; dj, Mp i= 1, 5, K; l= di, і til, tgs 
此 处 1 < k < 2 一 1, 因为 
g(0, -:-,0, £2) — 2(я — л) (о? — a) 
+ 24'À + [Са — r)a + 1;1 — 11 
— 2d'd — [(» — r)a, + 10,4 — 1]? 
+ 2[(s — r)a + 1,4 — 114,2 
I — 2[ (n — rja, + ld — 1134,28 
> [R(0,=2,a (1 — P) + PBP) — R(B,o a (1 = P) 
+ РЁР)1{ alg. 2 0, | 
知 (n — r)a + 1,4 > (n — r)a, + 1,4. [АШ 
eCe) 2 gi, +t- Eko Ds 7,0), mE 
上 式 右 边 作为 5570.5 RUPEE. Em a 相似 。 由 情况 a 的 
论证 方法 将 得 出 ; FE ERM ба) 在 £1 — 0, 7 一 1 g 
і зе 1 处 取 到 其 最 小 值 。 这 样 就 完成 了 引 理 的 证 明 。. 
引 理 4.21 ЖРЕР,0 与 了 的 意义 同 前 。 仍 以 А, 22-02204, 
> 0 PBP 的 全 部 非 0 特征 根 , 义 o > шн 


(n— oe 2ee 30-1, | (4.128) 


《这 等 于 要 求 (1 -5 1) (в — r + 2) 2 A). 则 在 模型 H,Z 
^ з Е 
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下 ,有 8CY) À ag + PX'BXÉ m. 
证 ， 找 正 交 阵 Т, 致 2189, == T'diag (us 575 has 0, s 
0)T。 用 引 理 4.20, 只 需 证 对 于 a > 0 及 满足 条 件 
ОСО, 一 T'diag(b,, ++, Вау 0, 575, DT 
的 矩阵 C > 0, aY) = aS? + P'X'CXÉ 不 能 一 致 优 于 8СУ). 
由 公式 《4.78) 算 册 | | 
RCR, =, 8(Ү)) — R(g, o, 4.(YD 
= 2(n — r)(a* — a1) + 271 — 25'b 
+ [(n — r)a + 1⁄4 — 1P 
— [(» — r)a + 11% — 112 | 
+ 41, 5-5, Aa — B, 05, 5) 
+ 2[(2 — r)a + 1⁄4 — 1]4'a 
— 2[(» — r)a, + 125 — 1]2'а 
|o ka (AM — bb')a, 
АТВ, a= (1,555, S), А == 《2 2.) b= (bestt 
by. Ж.Ж b> k, M) 8,(Y) 不 可 能 一 致 优 于 CO). R 
需 讨 论 bS iml, eg 的 场合 ,分 三 种 情况 : —— 


а. (s 一 "十 2)a 十 ел; 这 时 必 存 在 ?使 Б < М. 


否则 将 有 5; 一 1, i=l, g. 再 由 对 的 假定 及 (4.128)。 
将 有 a= a 而 6.(Y) = 8(Y). іХ, ЖН а, > a, 10 2, = 
à —h,Hdm06i—l-4H. | 
(a — r -F2)(a, —a) = 214, 
1 
以 及 | 
2(s — ғ) (а? — a) + 214 — 29/5 
+ [Ca — rja + 1⁄4 — 1]2 
— [Cn — r)a, + 1⁄5 — 1]* 
‚242°, 


= 22 — r + 2)G! — ай) + 2 У) (а + 604 


< 2(a + aj) É — r + 2)(a — a,) + 2 ai) — 
因而 2,0) 不 能 一 致 优 于 IO). 


b. (n — r + 2)a, + Ут, & „=(1-— 1 һ)/ 


(n 一 + 十 2)， 注 意 到 这 时 209 — r)a? + 285 -+ 10а — r)a + 
12 一 172 是 的 严格 下 降 函 数 ,因此 ,由 已 证 的 情况 as, 有 _ 
O(a — rja + 2174 + [Ca — r)a а iT 
< 2(n — r)ai + 25b + [Се 一 r)a; + 1⁄2 一 1р 
(OX 2(n — rja +2b'b + [(n — r)a + 1, — 1] 
因而 (Y) 不 能 一 致 优 于 5(Y). | . 


4 ` А I | 
ос. (n — r + 2)a, + 2 b, > 1. 此 时 2(s 一 а + 25+ 


[Cn — r)a + 125 一 11 是 a 的 严格 上 升 函 数 . БН b ca 
证 法 ,得 知 8.(Y》 不 能 一 致 优 于 5(У). BIME. 
对 固定 的 MEZE ,考虑 估计 类 
F {ast ÉX'BXÉ:a 0, B0, 
Ово, == Т'Фав(2,, -eg das 9, - °, DT}. 
车 .多 中 一 个 估计 相对 于 多 -是 可 容许 的 , 则 由 引 理 4.20, 此 估计 必 
蚌 忆 的 相对 于 类 多 的 可 容许 估计 我们 用 -Bayes HERRI H 
的 相对 于 多 的 (o^ Ау, FE) 可 容许 估计 ,回忆 x = Oxo, іп 
Tq E (65 60) о, 21 的 意义 同 前 . 有 À | 
R(B, d, a (I — P) + PBP) 
— 2(2 — r)a + 24/4 + [(8 — rja + 1⁄4 — 1] 
4Q1, a + 2[(n — r)a + 1⁄2 — 11278 
+ с Аа, 
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E o 的 先 验 分 布 = 使 

E,a == m = ms Ma), COV.(o) = V — (vj). 
当然 有 m; 220, Н mi = 0 一 > x( 疆 一 0) 一 1， 这 时 也 将 有 
e á = 0。 经 过 一 些 繁复 但 初等 的 计算 ,可 得 aS 十 #Х'ВХЁ# 在 先 
验 分 布 = 之 下 的 Bayes 风险 为 

R,(aS2 + ÊX BXA) — (a, A) C(a, PY —2a(n — r) 


— 21, + m) + 1, (4.129) 
此 处 | 
(n — r)(n — r + 2) (5 — rUe + m 
c-( (а — r)XL,¿ + m) 21 十 4diag ЖИ ) 
cO. + m)(1, my + V 
‚2(в— r) 0 
B Í 0 21 + 4diag (m `", з) 
+ Е, [ NY )е — rid, + >| 
L +a 2 
> 0, (4.130) 


Ek, R.(aS' + PX'BXBÉ) 3 а, A НОРТ АЖК. id D = (Ga, 
As 5", A18 220, 2,290, i= 1, ---, q, ШР Я, АА 
而 Raas + FX'BXA), 作为 в; Д›°**› la 的 函数 ， m Н. CH 
(4.129) 推 知 ) 当 шах (a, А ° ts А} со 时 > R. 一 co, 故 知 
R,(aS* 十 Ё#х'вхў) 在 五 上 唯一 的 一 点 (в, fws s А) 处 达 
到 其 最 小 值 ， 与 此 点 相应 的 估计 ,路 :0%5? 十 eX BAA, WER 
FERH = А Bayes 估计 。 依 第 一 章 定 理 1.7, Ж PBP 的 全 部 
非 0 ЕЕ le ,4s。 中 人 金 部 非 0 者，。 则 oS 十 PX'BXÉ 
Re, BI 4.18 及 注 4.5 可 知 ，R.(45 + PX'BX) 在 5 上 的 
最 小 值 必 在 集 - 
(Go, 1, ttes MO <a < 1,0 <А 1, 1,66, q) 


上 玉 到 ， 由 以 上 论证 及 引 理 4.17 和 4.21, 即 得 下 面 定理 中 1° 一 3° 
的 证 明 。 
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定理 4.16 (EER H, 之 下 有 

1? 设 m= (mis, ma) (1 xq r = rk(X), XP,0, 
n ERU TEIRUEE XO 及 了 分 别 是 一 非 负 随机 向 最 的 均值 向 量 与 协 
方差 阵 ?。 用 (4.130) 的 第 一 个 等 式 定义 C。 记 (4.129) 右 端的 函数 
为 Ка, 2), 以 及 | | 
D* = { (2, Ау" 2.):0 <a < 1, 0 =< 2; si, je 1,.-*-*, 4}. 
zi Ка, а) 在 D* 上 的 最 小 值 在 CT Аш» ^75 le) 处 达到 ， 而 
PBP 《其 中 B > 0) 的 非 零 特征 根 的 全 体 怡 是 1 A) 中 的 
非 0 者, 则 aS 十 序 XBXE P, m 

2° $/(n— r + 2) o. 

39 Æ a > 0, PBP (Жип B > 0) 的 全 体 非 0 特征 根 为 
au >> 0, H.12) d. MU asa PX XB 
e, i E 
4? Æ В >> 0, rk(PBP) — 1, 1 J PBP 的 非 0 特 征 根 ，a>> 


0, 则 a5* + #Х'ВХЁ 8. o 的 充 要 条 件 为 以 下 两 式 同 时 成 立 


Сакаева," (4.131) 
— (n — r + 2)а? + a + 2(8 — ғ + 2)аА + 9 — 24. 
之 0. (4.132) 


证 .1° 一 3° 已 在 前 面 证 明了 ,只 剩 下 4 和。 必要 性 部 分 由 定理 
4.15 的 (4.117) 和 (4.118) 式 立即 得 出 。 往 证 条 件 的 充分 福 。 RE 
交 阵 Т, ЯХ | 
0: BO, = T'diag (2, 0, -..*, 0T. 
id Tn = š = (Ë tea EY. BOL12)8 
R(B, а, a (1 — P) + PBP) 

= 2(2 — r)a + 24! + [s 一 а-+ ¿ — 1]? 

+ 442281 + 2[5 — r)a + 1 — 114281 + PEL 
Жой zieat я, MER EG = M < оо, Wum 


D) fé A NEUE 1 只 取 非 负 值 的 随机 合 景 ， 
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EADM] M Zw. HM ¿= 0 时 有 .M = 0. 于 是 在 此 先 验 分 
布 之 下 ， 95° + BX'BXB 的 Bayes 风险 , 易 算 出 为 | 
R.(aS) + ЁХ'ВХВ) = (n— ғ)(в — r + 2) 
+ 2[Ca — r) + (n. — rulaa 
E + (3 + 64 + МЭА? — 2(n — r)a 
| —2(1-c-2)101. | a 
EEX as 4 的 函数 有 唯一 的 最 小 信和 点 (ao, 20), 满足 方程 组 _ 
(2 一 > 十 2)ao 二 (ii 十 zx 加 一 1， 

{ (я — rl ia, + (3 + би + M)2 = 1 + x. 4255) 
ЗЇ a > 0, ¿> 0， 这 不 难 直接 解 出 (4.133)， 并 利用 0 x < 
V 对 证 得 ， 据 第 一 章 可 容许 定理 ,有 a S + PX BAEZ P (Bo 为 
当 a= 2, R В). 

现 设 a, 4 满足 (4.131) 和 (4. 132), | 且 (4.131) 成 立 严格 不 等 

=. Н 
| : ом [1 — (n — r + 2)a — 1]/2, 
M = [(1 + :)(1 — (n — r)a — 31) — 3141/2, 
MILA (a, 2) 代 (4.133) 中 的 〈oo， 2) BP, (4133). ВН a> 
0, 43270, (n— r + 2)а + 1<1 及 (4.132) 成 立 ; 知 0 cu < 
VM<co， 因 此 存在 如 的 先 验 分 布 x, 8k (0,00) 一 1, E.GD=— 
“s EED 一 MD， 这 时 aS + FX BX 成 为 《4.133) 式 下 面 提 
到 的 那个 as 十 РХ'В„Х, 因而 为 一 在 纺 中 的 可 容许 估计 。 

Ж а, 4 使 (4.131) 成 立 等 号 且 使 (4.1327 成 立 。 则 很 易 验证 
в 之 1。 这 时 所 要 的 结论 由 引 理 4.21 给 出 。 定理 证 毕 ， 

X410 设 了 服从 正 态 分 布 N(X8, PV), > 0 已 知 。 若 
在 定理 4.16 中 ;以 VY fL Y,V2O2X I X, V??X(X'V2X)- 
«Хип 代 P， 定 理 的 结论 仍 有 效 。 

定理 4.15 和 4.16 分 别 给 出 了 (在 模型 H, 之 下 ) ҮЛҮ 50 


D x 可 如 下 作出 取 se(b и), 95 Sk Co, E 6) (a, — u) = еф M, 
Е p 一 (sa 一 «)/(8, —8). 4 =(г:)) = ру к(42.}) = 1— р, 
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的 必要 条 件 和 充分 条 件 ， 这 之 间 尚 有 一 些 距 离 尚 待 弥合 ， 
 :E42 在 定理 4.16 的 1° 中 ， 当 了 为 对 角形 diag Wns ccn 
к) BE m; = 0=> v; = 0G = 1, 555, q) 时 , 存在 随机 向 
R 《Z,, '…,，2Z4)， 致 其 均值 向 量 和 协 方 差 阵 分 别 为 wm 及， 这 
时 ,表达 式 
(aiA) C(ai A')' — 2[a(n 一 D +a, 4:5] +1 

在 R 的 最 小 值 在 

а = fa 一 * 十 2 [> 《1 + m/Q + 4m; + «Jr s 

À, = 2(1 + mi)a/ (2 + 4m; + vi), £= 1, +: q (4.134) 
处 达到 .车 由 《4.134) 定 义 S 2, Н т vu 满足 m;2 0, vu 
0, m = 0 —> rs; 0, ¿= 1, +, gs 而 PBP 的 非 零 特征 要 
为 4.0... à. BOB : Ç 5 

a$? + ÊX BX > P, 
注 4.8 ERAH 之 下 , # 和 一 1 ，2 之 2《 这 就 是 通常 估 


计 一 维 总 体 方差 (均值 未 知 ) 的 问题 ), 则 Y'4Y ^ o? 的 充 要 条 件 
Ж: 


" 
Y'AY = a У) (Y; — Ў) + #nY2, 
1 


此 处 于 一 十 YI Y; dab 满足 以 下 两 条 件 之 一 : 


1? a = 1/( + 1), £ = 0, 
2° a>0, ¿>0, (n+ lja+ b < 1, — (n + Maca 
+ 2(n + Dab + 1 — 25 2: 0. 


$45 误差 方差 的 二 次 型 估计 的 可 容许 性 
H (在 一 般 估计 类 中 ) 


在 上 节 中 我 们 看 到 : 关于 线性 模型 的 误差 方差 的 二 次 型 使 
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计 在 二 次 型 估计 关中 的 可 容许 性 ,最 则 还 没有 完整 的 解决 ,但 记 有 
了 相当 普遍 的 结果 。 就 是 说 、 我 们 不 仅 得 出 了 很 广 一 美的 可 容许 
估计 ， 而 且 找 到 了 可 容许 性 的 必要 条 件 与 充分 条 件 。 二 者 约 差 距 
不 很 大 。 如 果 在 全 体 佑 计 类 中 去 考虑 问题 ， 情 况 就 复杂 得 多 。 郧 
使 假定 本 机 误差 服从 正 态 分 布 ,目前 也 还 谈 不 上 任何 系统 的 结果 。 
而 在 回归 系数 的 线性 估计 方面 我 们 已 看 到 ,在 正 态 假设 下 问题 有 
了 较 完满 的 解决 。 这 显示 出 ,方差 估计 的 容许 性 癌 题 ,在 难 罕 上 要 
比 线性 佑 计 为 大 . 

本 节 的 目的 是 介绍 匡 启 光 、 成 平和 李 国 英 在 这 方面 的 若干 研 
究 成 果 , 见 文献 [17] 和 [18]. 

仍 如 前 , 设 有 线性 模型 

Y = Xg + e, | (4.135) 

Y, X, 8, c ЭЎ] nX 1, Xp, p X 1 fii sn X HE. XE 
知 ,而 < 满足 条 件 | 


¿= NO, Pla), 0c < оо, (4.136) 
为 估计 到 ,采用 平方 损失 函数 
1008, d) = (z — 2). (4.137) 


DAT SER PE (4.135) — (4.137) 总 括 地 称呼 为 模型 H.. Ж n BS fh 
计 8(Y) feed eB E TURAE. Mio (Y) ~ c. 

本 节 的 主要 结果 是 下 面 的 定理 。 

定理 4.17 在 模型 瓦 : 之 下 ;有 

1? [Уе 2) ~ 7. | 

2° 设 «4 (C)C.A* (X), B > 0, 4 = C'C + В, 

Y'(1 — CACY] lint 2) ~ v, 

证 ， 先 证 1"。 我 们 先 在 《4.135》 中 的 8 = 0 (BD Y — NO, 
c1.) 的 补充 假定 下 来 证 明 (Y) 2lYI/(s + 2) — 7. 146 = 
—(s + 2)/2о%, WW g(6)&c = 一 Cn + 2)/20. 以 8 为 参数 ，Y 
ARRAMA C(O)exp(5,(00), Ж 

CCO) — (2x) "^(—28/ (n + 2))*^. 
容易 验证 , 对 这 个 分 布 族 而 言 ， 第 一 章 定 理 1.9 的 条 件 全 部 成 立 ， 
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因此 &(Ү)- о Gr 8 = 0 КЕЗЕТ). 
对 一 般 情 况 , 设 存在 估计 量 SOY), # 
R(B,c,8) < R(8, 0, 8) 对 一 切 g€ Е?, 0 «o! < оо, 
(4.138) 
则 更 有 К(0, 0", 2,) < К(0, 0, 8， 对 一 切 077 0. 由 已 证 的 
关于 8 一 0 时 的 结果 ,及 损失 函数 (4.137) 关 于 4 的 严格 凸 狂 ， 
A1? 
P(A(Y) == aXY)) —1, HEH c > 0, 
此 处 P, 表示 Y ~ NCO, Pl). 由 上 式 知 . 
Sly) = 8,(у), a. s. L, Т y € R^, (4.139) 
区 由 (4.139) 知 ;4.138) 对 一 雪 Be R° 和 о? > 0 成 并 等 号 ,因而 
证 明了 &(CY)-— e, BB 1°, 
为 证 2*, 先 讨论 С = Хх 的 情况 ，Y 有 密度 
PCO, 8, а?) = Quo?) "?ехр(— 15) — Xgll/2o?). 
因 号 盖 0, 可 以 取 N(O,7B 7 为 有 的 先 难 分布 。 令 
POr) 
ma (220) "^| B |'^| 4 |? ep — yQ — X A7X)y/20) 
x | (AI A Qu)" exp — (8 — 47) 4(8 
— A?X'y)[2a*]ag 
= (2x0) *^| B|'2| A] 7? exp( —'(1 — ХААХ) 20°). 
id | 
TO) = y'(1 — XA! Xy[(n + 2), а = —(n + 25/207, 
а? == g(a) = —(n + 2)/2a, 
Bla) — (2x) "^| B|'2| A| – (n + 2)/22] ^, 
我 们 有 
Pely 0°) = В(а)ехр(Т (0). (4.140) 
对 这 个 指数 分 布 族 来 说 , 容易 验证 定理 1.9 RARE. DU, 


1) ЖИН б, (ôa 十 61)12， 将 得 出 5, 一 致 优 于 5. 


щу 具 密 度 函 数 (LOR € T(Y) ~ 再 应 用 第 一 章 定理 
1.10, 5] ЖЖ H, 之 下 ,有 YU — XAX')Y (n + 2) ~ о? 

其 次 , 涛 虑 一 般 的 C, 由 假定 (С) С. Bio FERE 
0,& C = ХО, 记 aY) = YU — CA^" C')Y[(n + 2). Ж 
在 的 估计 量 5.(Y), 致 (4.138) 成 立 ; 则 易 见 有 : 当 Y:— NCCR, 
di.) (#є R°, q— C 的 列 数 ) 而 损失 函数 为 (4.137) 时 ,有 

R(ë#, 0, &(Y)) = R(É, P, &CY)), 一 切 fe R*, 
а? 4, | (4141) 

与 情况 1° 的 论证 类 似 , 由 此 得 出 - | 

Рр. (БСҮ) = &()) = 1, 
此 处 Pk, 表示 Y ~ NCCp。oT。)， 此 显然 可 写 为 

Pg ((Y) = 8(Y)) = 1. 
而 Ps, 表示 Y ~ N(X8, iis 这 证 明了 АУ) ~ о. ш 
р, 

# 4.11 设 Y ~ N(X0, гу), V > 0 EAI ҮТҮ 
数 (4.137) 之 下 :有 

1? Y'VY^Y/(n--2)— 

2° E 4 (C)C AE (VOX), B > 0, 4 — c C + B, Hj 

YVI — CA^C)V?^Y|(n 2) v, 

E49 在 定理 4.17 [0-2° 中 ， 即 使 在 СС 为 满 秩 的 情况 ， 
B > 0 的 条 件 也 不 能 放宽 为 B 2 0. 事实 上， 考虑 X = 1, 的 
特例 ， 这 相当 于 估计 一 维 正 态 分 布 NE r) 的 方差 到 (均值 8 
жм). Ж C —1,,À] C'C 9 а. Е B = 0,ij 

Ү(1 — CA CY Cn + 2) = S:/ (n + 2), 


kese Oyy, У Ууу. В 见 9/0 +2) 


A2 о? 的 可 容许 估计 * 因 为 直接 计算 得 出 ,估计 量 S'[(n + 1) 的 
风险 处 处 小 于 S/C + 2) 的 风险 . 


不 难 验 证 , 就 本 例 而 言 ， 还 一 切 形 如 a3 的 估计 中 ,以 a = 


(n 十 1) 最 优 ,但 即使 这 个 估计 ( 指 S/a + 1)) 也 不 是 可 容许 
的 一 一 这 当然 是 指 在 全 体 估计 类 中 .， 若 局 限 在 二 次 型 估计 类 家 
m, 则 由 定理 4.16 的 2? NI, 5'/(» + 1) 是 可 容许 的 。 本 例 也 说 
BB: 到 使 在 正 态 分 布下 , 红 可 容许 与 在 全 体 估计 类 中 可 容许 也 不 
等 价 ， 
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